AWS เปิดตัว TorchServe ช่วยนำโมเดล PyTorch ขึ้น Production ได้อย่างง่ายๆ

AWS เปิดตัวเครื่องมือ Opensource “TorchServe” สำหรับโมเดล Machine Learning ที่พัฒนาโดย PyTorch โดยเป็นโปรเจกต์ที่ AWS ดูแลร่วมกับ Facebook ผู้พัฒนา PyTorch

TorchServe นั้นถูกเปิดตัวขึ้นในวันที่ 21 เมษายนที่ผ่านมา เป็นเครื่องมือที่ช่วยให้นักพัฒนาสามารถนำโมเดล Machine Learning ที่พัฒนาขึ้นจาก PyTorch ไปอยู่บนระบบ Production ได้โดยง่าย สามารถสเกลได้ มี Latency ต่ำ และประสิทธิภาพในการประมวลผลสูง

ตัวอย่างของฟีเจอร์หลักใน TorchServe นี้ ก็มีได้แก่
* ชุดการจัดการพื้นฐานสำหรับแอปพลิเคชันที่ใช้งานบ่อย เช่น การตรวจจับวัตถุ และการจัดกลุ่มตัวอักษร ช่วยให้นักพัฒนาไม่ต้องคอยเขียนโค้ดเพื่อ Deploy เอง
* การ Deploy หลายโมเดล
* การทำ A/B Testing โมเดล
* บันทึกสถิติการใช้โมเดล
* RESTful endpoint เพื่อเชื่อมต่อกับแอปพลิเคชันอื่นๆ

TorchServe สามารถทำงานร่วมกับ Deployment Environment ได้หลายประเภท ไม่ว่าจะเป็น Kubernetes, Amazon SageMaker, EKS หรือ EC2 ผู้อ่านท่านใดที่สนใจ สามารถศึกษาข้อมูลเพิ่มเติมได้ที่ https://github.com/pytorch/serve


ที่มา: https://www.infoworld.com/article/3540415/aws-unveils-open-source-model-server-for-pytorch.html

Check Also

Asana ประกาศควบรวม StackAI เดินหน้ายกระดับแพลตฟอร์มด้วย Multi-Agent Workflow ข้ามระบบ Enterprise

Asana ประกาศเข้าซื้อกิจการ StackAI แพลตฟอร์ม No-code สำหรับสร้าง AI Workflow เพื่อยกระดับการทำงานร่วมกันระหว่างมนุษย์และ AI ให้สามารถสั่งการและทำงานข้ามระบบเอ็นเตอร์ไพรส์ได้อย่างไร้รอยต่อ ผ่านการช่วยออกแบบ ทดสอบ และควบคุม AI …

ยกระดับ AI Vibe Coding สู่ Spec-Driven Development ด้วย GitHub Copilot และ Enterprise Governance พร้อมเบื้องหลังการทำ Agentic SDLC

ปัจจุบัน AI ก้าวข้ามขีดจำกัดจากการเป็นเพียงเครื่องมือช่วยเขียนโค้ด สู่การเป็น Agent ที่สามารถทำงานสอดประสานร่วมกับนักพัฒนาได้แบบ End-to-End ตลอด Software Development Lifecycle หรือ SDLC ทว่าในโลกการพัฒนาซอฟต์แวร์ระดับ Enterprise …