ซอฟต์แวร์แห่งโลกยุคใหม่ที่มาแรงสองตัวคือ Apache Hadoop/Spark สำหรับงานประมวลผล Big Data และ TensorFlow สำหรับงาน Machine Learning

ล่าสุดทีมพัฒนาจาก Yahoo จับมันมารวมกันแล้วในชื่อว่า TensorFlowOnSpark หน้าที่ของมันคือการนำฟีเจอร์เรียนรู้ของ TensorFlow มารันอยู่บนคลัสเตอร์ Hadoop/Spark โดยตรง เพื่อไม่ให้ต้องย้ายข้อมูลระหว่างคลัสเตอร์สองระบบ ซึ่งเสียเวลาและทรัพยากรในการย้ายข้อมูลขนาดใหญ่

แนวคิดนี้ไม่ใช่ของใหม่ เพราะปีที่แล้ว Yahoo เคยนำ Caffe เฟรมเวิร์คด้าน Deep Learning ชื่อดังอีกตัวมารันบน Spark โดยใช้ชื่อว่า CaffeOnSpark มาก่อนแล้ว คราวนี้เมื่อ TensorFlow ได้รับความนิยมมากขึ้น Yahoo จึงพัฒนาระบบแบบเดียวกัน

TensorFlowOnSpark เปิดโค้ดเป็นโอเพนซอร์ส ใช้สัญญาอนุญาต Apache 2.0 โค้ดอยู่บน GitHub

ที่มา - Yahoo