HPE จับมือ Hortonworks เผยปรับปรุง Apache Spark ให้เร็วขึ้นได้ถึง 15 เท่า

HPE และ Hortonworks ได้ออกมาประกาศความสำเร็จร่วมกันในการช่วยปรังปรุง Spark Kernel ให้มีความเร็วสูงขึ้นได้ถึง 15 เท่า และใช้ Memory ได้อย่างมีประสิทธิภาพสูงขึ้นถึง 50% และเตรียม Contribute ความสำเร็จในครั้งนี้ให้แก่ชุมชน Apache Spark Open Source ด้วย

Credit: ShutterStock.com
Credit: ShutterStock.com

สิ่งที่ HPE และ Hortonworks ได้ทำร่วมกันก็คือการเขียน Algorithm ในส่วนของ Spark Shuffle Engine ขึ้นมาใหม่ และโค้ดส่วนนี้จริงๆ แล้วก็เป็นโค้ดที่ HPE ได้พัฒนาขึ้นมาให้ลูกค้ากลุ่ม Financial Service ของตนใช้นั่นเอง

การแบ่งปัน Source Code ลักษณะนี้ถือเป็นเสน่ห์อย่างหนึ่งของโครงการ Open Source เพราะทุกๆ ครั้งที่โค้ดเหล่านี้ถูกปรับปรุงให้ดีขึ้น ระบบที่ใช้ Source Code เหล่านี้ทั่วโลกก็จะถูกปรับปรุงตามไปด้วย

อีกสิ่งที่น่าจับตามองก็คือการเข้าตลาด Big Data Analytics ของ HPE ด้วยการจับคู่กับ Hortonworks เองนี้ก็ถือเป็นความสัมพันธ์ของสองยักษ์ใหญ่ที่น่าสนใจดีทีเดียวนั่นเอง

ใครที่รอ Source Code ชุดนี้ ก็รอติดตามข่าวของ Apache Spark กันต่อไปได้ครับ

ที่มา: http://www.enterprisetech.com/2016/03/06/15x-spark-improvements-coming-to-the-open-source-community-say-hpe-and-hortonworks/

About techtalkthai

ทีมงาน TechTalkThai เป็นกลุ่มบุคคลที่ทำงานในสาย Enterprise IT ที่มีความเชี่ยวชาญทางด้าน Network, Security, Server, Storage, Operating System และ Virtualization มารวมตัวกันเพื่ออัพเดตข่าวสารทางด้าน Enterprise IT ให้แก่ชาว IT ในไทยโดยเฉพาะ

Check Also

กลุ่มผู้ผลิตชิปวอนทำเนียบขาวเลี่ยงแทรกแซงกลไกตลาดหน่วยความจำ

สมาคมอุตสาหกรรมชิปได้ออกมาเรียกร้องให้ทำเนียบขาวหลีกเลี่ยงการเปลี่ยนแปลงครั้งใหญ่ในแนวทางการกำกับดูแลตลาดชิปหน่วยความจำ

Tenable จับมือ Anthropic เข้าร่วม “Project Glasswing” ยกระดับการป้องกันไซเบอร์ในยุค AI [Guest Post]

การเข้าร่วม Project Glasswing และการได้ร่วมทำงานกับ Claude Mythos Preview ในครั้งนี้ จะช่วยให้ Tenable สามารถสนับสนุนลูกค้าให้เข้าใจพฤติกรรมของโมเดล AI ระดับแนวหน้า (Frontier AI) …