Google เปิดตัวความสามารถใหม่ Computer Use บนแอป Gemini สำหรับ Mac ยกระดับ AI จากผู้ช่วยตอบคำถามสู่การลงมือทำงานแทนผู้ใช้ สามารถคลิกเมาส์ พิมพ์ข้อความ เปิดแอป จัดการไฟล์ และทำงานข้ามเว็บไซต์ได้อัตโนมัติ เพียงพิมพ์คำสั่งภาษาธรรมชาติ โดยไม่รบกวนการใช้งานหน้าจอหลัก
ความสามารถ Computer Use ช่วยให้ Gemini จัดการงานที่ต้องทำหลายขั้นตอน เช่น ดึงข้อมูลจากไฟล์ PDF ไปกรอกแบบฟอร์ม ปรับแต่งภาพถ่ายจำนวนมากผ่านโปรแกรมออกแบบ นำข้อมูลจาก Dashboard หลายเว็บไซต์มาสร้างงานนำเสนอใน Google Slides หรือจัดเตรียมข้อมูลสินค้าเพื่อประกาศขายออนไลน์ โดย AI จะจัดการขั้นตอนต่าง ๆ ตั้งแต่การเปิดเมนู คลิกปุ่ม ไปจนถึงกรอกข้อมูลแทนผู้ใช้
จุดเด่นคือ Gemini สามารถทำงานผ่านหน้าต่างแยกในเบื้องหลัง (Isolated Background Window) ทำให้ผู้ใช้ยังสามารถใช้หน้าจอและเมาส์ทำงานอื่นได้ตามปกติ พร้อมดูความคืบหน้าผ่าน Live Preview ภายในหน้าต่างแชต โดยผู้ใช้เลือกได้ว่าจะอนุญาตให้ AI เข้าถึงแอปใด สามารถหยุดการทำงานได้ตลอดเวลา และต้องอนุมัติการดำเนินการสำคัญก่อนที่ AI จะทำต่อ
การเปิดตัวครั้งนี้สะท้อนการแข่งขันในตลาด AI Agent ที่กำลังเปลี่ยนจากการสร้างข้อความและวิเคราะห์ข้อมูล ไปสู่การควบคุมคอมพิวเตอร์เพื่อทำงานแทนผู้ใช้โดยตรง โดยเฉพาะงานซ้ำ ๆ ที่ต้องสลับหลายแอปพลิเคชัน ซึ่งอาจช่วยลดเวลาทำงานและเพิ่มประสิทธิภาพการใช้งานคอมพิวเตอร์ในชีวิตประจำวัน
เบื้องต้น Google เริ่มทยอยเปิดให้ใช้ Computer Use ในสหรัฐอเมริกาผ่านแอป Gemini สำหรับ Mac เฉพาะผู้ใช้บัญชี Google ส่วนบุคคลที่มีอายุ 18 ปีขึ้นไป และสมัคร Google AI Plus, Pro หรือ Ultra รองรับเครื่อง Mac ชิป Apple Silicon ที่ใช้ macOS Sequoia 15.0 ขึ้นไป โดยยังไม่ประกาศกำหนดเปิดให้ใช้งานในประเทศไทย