AWS เปิดตัว TorchServe ช่วยนำโมเดล PyTorch ขึ้น Production ได้อย่างง่ายๆ

AWS เปิดตัวเครื่องมือ Opensource “TorchServe” สำหรับโมเดล Machine Learning ที่พัฒนาโดย PyTorch โดยเป็นโปรเจกต์ที่ AWS ดูแลร่วมกับ Facebook ผู้พัฒนา PyTorch

TorchServe นั้นถูกเปิดตัวขึ้นในวันที่ 21 เมษายนที่ผ่านมา เป็นเครื่องมือที่ช่วยให้นักพัฒนาสามารถนำโมเดล Machine Learning ที่พัฒนาขึ้นจาก PyTorch ไปอยู่บนระบบ Production ได้โดยง่าย สามารถสเกลได้ มี Latency ต่ำ และประสิทธิภาพในการประมวลผลสูง

ตัวอย่างของฟีเจอร์หลักใน TorchServe นี้ ก็มีได้แก่
* ชุดการจัดการพื้นฐานสำหรับแอปพลิเคชันที่ใช้งานบ่อย เช่น การตรวจจับวัตถุ และการจัดกลุ่มตัวอักษร ช่วยให้นักพัฒนาไม่ต้องคอยเขียนโค้ดเพื่อ Deploy เอง
* การ Deploy หลายโมเดล
* การทำ A/B Testing โมเดล
* บันทึกสถิติการใช้โมเดล
* RESTful endpoint เพื่อเชื่อมต่อกับแอปพลิเคชันอื่นๆ

TorchServe สามารถทำงานร่วมกับ Deployment Environment ได้หลายประเภท ไม่ว่าจะเป็น Kubernetes, Amazon SageMaker, EKS หรือ EC2 ผู้อ่านท่านใดที่สนใจ สามารถศึกษาข้อมูลเพิ่มเติมได้ที่ https://github.com/pytorch/serve


ที่มา: https://www.infoworld.com/article/3540415/aws-unveils-open-source-model-server-for-pytorch.html

Check Also

Have Solution 2020 จัดงาน Beyond Monitoring 2026 ตอกย้ำบทบาทผู้นำด้าน Enterprise Open Source Monitoring พร้อมยกระดับบริการด้วยทีม Support 24×7 [Guest Post]

ท่ามกลางความท้าทายขององค์กรยุคดิจิทัลที่ต้องบริหารจัดการระบบ IT Infrastructure, Cloud, Application และ Cybersecurity ที่มีความซับซ้อนมากขึ้น การมองเห็นปัญหาก่อนที่จะส่งผลกระทบต่อธุรกิจกลายเป็นปัจจัยสำคัญในการรักษาความต่อเนื่องของการดำเนินงาน บริษัท Have Solution 2020 จำกัด จึงได้จัดงาน …

Vercel เปิดตัวเฟรมเวิร์กใหม่และระบบควบคุมระดับองค์กร สำหรับโครงสร้างพื้นฐาน AI เชิงเอเจนต์

Vercel สตาร์ทอัพด้านการพัฒนาซอฟต์แวร์ฟรอนต์เอนด์ ได้ประกาศเปิดตัวชุดผลิตภัณฑ์ใหม่ที่งาน Ship ซึ่งเป็นงานประชุมสัมมนาประจำปีของบริษัท เพื่อเพิ่มความเชี่ยวชาญให้กับแพลตฟอร์มโครงสร้างพื้นฐานปัญญาประดิษฐ์เชิงเอเจนต์ให้สอดรับกับแนวทางที่องค์กรต่าง ๆ ใช้ในการติดตั้งใช้งาน รันระบบ และขยายขนาดร่วมกับเอเจนต์ AI