Tag Archives: Kimi

Moonshot AI ห้องปฏิบัติการปัญญาประดิษฐ์สัญชาติจีน ระดมทุนได้ 2 พันล้านดอลลาร์ด้วยมูลค่ากิจการที่สูงกว่า 2 หมื่นล้านดอลลาร์ TechCrunch รายงานข่าวข้อตกลงนี้ โดยอ้างอิงโพสต์บนโซเชียลมีเดียจากบริษัทที่ปรึกษาด้านการลงทุนที่มีส่วนเกี่ยวข้องในดีล การระดมทุนรอบนี้มีหน่วยงานด้านเวนเจอร์แคปปิตอลของ Meituan ซึ่งเป็นบริษัทส่งอาหารรายใหญ่ที่สุดของจีนเป็นผู้นำ และมีนักลงทุนรายอื่น ๆ เข้าร่วมด้วย การลงทุนครั้งนี้เกิดขึ้นเพียงไม่กี่สัปดาห์หลังจากที่ Moonshot AI เปิดตัวโมเดล AI รุ่นใหม่ล่าสุด Kimi-K2.6 ซึ่งเป็นโมเดลภาษาขนาดใหญ่แบบโอเพนซอร์สที่มีพารามิเตอร์ประมาณ 1 ล้านล้านตัว ประกอบด้วย “ผู้เชี่ยวชาญ” จำนวน 384 ตัว ซึ่งเป็นโครงข่ายประสาทเทียมขนาดเล็กที่แต่ละตัวได้รับการปรับแต่งให้เหมาะกับงานที่แตกต่างกันออกไป เมื่อ LLM ได้รับพรอมต์ ระบบจะใช้สิ่งที่เรียกว่ากลไกความใส่ใจเพื่อระบุและจัดลำดับความสำคัญของส่วนที่สำคัญที่สุดในคำขอ ข้อมูลดังกล่าวจะถูกจัดเก็บไว้ในโครงสร้างข้อมูลที่เรียกว่าแคช KV หนึ่งในฟีเจอร์เด่นของ Kimi-K2.6 คือโมดูลที่บีบอัดแคช KV ให้อยู่ในรูปแบบปริภูมิแฝง (latent space) ซึ่งเป็นตัวแทนทางคณิตศาสตร์เชิงนามธรรมที่ใช้หน่วยความจำน้อยลง Moonshot AI นำเสนอ LLM ควบคู่ไปกับอัลกอริทึมที่เฉพาะทางมากขึ้น หนึ่งในนั้นคือ Kimi-VL ซึ่งเป็นโมเดลวิชัน-ภาษาแบบโอเพนซอร์สที่ปรับแต่งมาเพื่อประมวลผลข้อมูลภาพ โดยมีความเชี่ยวชาญเป็นพิเศษในการดึงข้อมูลจากวิดีโอ บริษัทไม่ได้ลงทุนเพียงแค่การพัฒนาโมเดลโอเพนซอร์สเท่านั้น แต่ยังรวมถึงการวิจัยพื้นฐานด้าน AI ด้วย …