Google ได้เปิดตัว Gemini เวอร์ชันใหม่สำหรับผู้ใช้งานบน Mac ซึ่งสามารถโต้ตอบกับแอปพลิเคชันอื่น ๆ บนเครื่องคอมพิวเตอร์ของผู้ใช้งานได้แล้ว

ฟีเจอร์นี้เปิดให้ใช้งานแล้วในประเทศสหรัฐอเมริกา โดยผู้ใช้งานจำเป็นต้องสมัครบริการ Google AI ซึ่งจะช่วยให้บัญชี Google ของผู้บริโภคทั่วไปสามารถเข้าถึงเครื่องมือปัญญาประดิษฐ์ที่หลากหลายขึ้น รวมถึงได้รับพื้นที่จัดเก็บข้อมูลเพิ่มเติมและฟีเจอร์อื่น ๆ อีกหลายอย่าง
ผู้ใช้งานสามารถสั่งให้ Gemini เปิดแอปพลิเคชันในเครื่องได้โดยการระบุคำสั่ง “@Computer use” ลงในพรอมต์ ตัวอย่างเช่น นักออกแบบสามารถอัปโหลดภาพร่างของยานพาหนะและขอให้เอเจนต์ AI ช่วยเปลี่ยนให้เป็นภาพเคลื่อนไหวแบบสามมิติ โดย Gemini จะค้นหาแอปพลิเคชันที่จำเป็นสำหรับงานนั้น ๆ สร้างแผนงาน และดำเนินการตามขั้นตอนจนเสร็จสิ้น
เอเจนต์ตัวนี้รองรับงานที่ประกอบด้วยการกระทำหลายสิบขั้นตอน ยิ่งไปกว่านั้น ผู้ใช้งานยังสามารถนำผลลัพธ์จากเวิร์กโฟลว์ที่ Gemini เพิ่งทำเสร็จไปใช้ต่อยอดในโปรเจกต์ถัดไปได้ ตัวอย่างเช่น ผู้ใช้งานอาจให้เอเจนต์สร้างชิ้นงานภาพในเครื่องมือออกแบบ จากนั้นจึงเปลี่ยนให้เป็นมินิแอปด้วย Visual Studio Code
Gemini ไม่เพียงแต่โต้ตอบกับแอปพลิเคชันในเครื่องได้เท่านั้น แต่ยังรวมถึงบริการบนเว็บด้วย ซึ่งหมายความว่ามันสามารถโหลดข้อมูลจากหน้าเว็บไซต์เข้าสู่โปรแกรมที่รันอยู่บนเครื่องของผู้ใช้งานได้ รวมถึงสามารถย้ายข้อมูลในทิศทางตรงกันข้ามหรือรับส่งข้อมูลระหว่างบริการคลาวด์ต่าง ๆ ได้อีกด้วย
AI จะดำเนินการทำงานต่าง ๆ ในหน้าต่างเบื้องหลัง ส่งผลให้ผู้ใช้งานไม่จำเป็นต้องหยุดทำงานของตนในระหว่างที่เอเจนต์กำลังประมวลผล โดยผู้ใช้งานสามารถติดตามเวิร์กโฟลว์ของ Gemini ผ่านหน้าต่างแสดงตัวอย่างที่ติดตั้งไว้ในหน้าต่างแชทของแอปบน Mac นอกจากนี้ Google ยังได้รวมการควบคุมที่ช่วยให้ผู้ใช้งานสามารถให้คำแนะนำแก่ Gemini ได้ในระหว่างที่กำลังทำงานอยู่
“ความเป็นส่วนตัวและความมั่นคงปลอดภัยถูกสร้างขึ้นมาเป็นส่วนหนึ่งของระบบ โดยคุณสามารถเลือกได้ว่าแอปใดบ้างที่ Gemini สามารถเข้าถึงได้ สามารถดูทุกขั้นตอนแบบสด ๆ สามารถสั่งหยุดพักได้ทุกเมื่อ และสามารถอนุมัติการกระทำสำคัญ ๆ ก่อนที่จะเกิดขึ้นจริง” Michael Friedman ผู้จัดการกลุ่มผลิตภัณฑ์ของแอป Gemini ที่ Google เขียนระบุไว้ในบล็อกโพสต์
Muse เวอร์ชัน Mac ซึ่งเป็นเอเจนต์ AI ที่เพิ่งเปิดตัวโดย Meta Platforms ก็มีความสามารถในการโต้ตอบกับแอปพลิเคชันและข้อมูลภายในเครื่องได้เช่นกัน ยิ่งไปกว่านั้น ระบบเครื่องเสมือนบนคลาวด์ยังช่วยให้มันสามารถทำงานได้แม้ในขณะที่คอมพิวเตอร์ของผู้ใช้งานไม่ได้เชื่อมต่ออินเทอร์เน็ต ขณะที่ Dots ซึ่งเป็นบริการคู่แข่งจาก OpenAI ก็มีความสามารถในลักษณะเดียวกันนี้เช่นกัน
ในอนาคต Google อาจพยายามพัฒนาฟีเจอร์การโฮสต์เวิร์กโฟลว์บนคลาวด์ให้เทียบเท่ากับคู่แข่ง นอกจากนี้บริษัทยังสามารถต่อยอด Gemini ในด้านอื่น ๆ ได้อีก โดยเฉพาะอย่างยิ่งการนำโหมดการใช้งานคอมพิวเตอร์ของ Gemini ไปใช้กับระบบปฏิบัติการอื่น ๆ เพิ่มเติม และการเพิ่มฟีเจอร์สำหรับกลุ่มลูกค้าธุรกิจ โดยปัจจุบัน Dots ของ OpenAI ได้รวมความสามารถที่ออกแบบมาเพื่อทำงานอัตโนมัติในเวิร์กโฟลว์ธุรกิจ เช่น การจัดซื้อจัดจ้าง เข้าไว้แล้ว
ที่มา: https://siliconangle.com/2026/11/19/google-adds-computer-use-capabilities-to-geminis-mac-app/
TechTalkThai ศูนย์รวมข่าว Enterprise IT ออนไลน์แห่งแรกในประเทศไทย














