Chrome อัปเดต! เพิ่มฟีเจอร์เลือกจากหน้าจอให้ Gemini และ 3.5 Flash ควบคุมคอมพิวเตอร์ได้

Google กำลังทยอยอัปเดตฟีเจอร์ใหม่ให้กับ Gemini ที่อยู่ใน Chrome นั่นคือ เครื่องมือ "เลือกจากหน้าจอ" (Select from screen) ที่ช่วยให้ผู้ใช้สามารถจับภาพข้อความหรือรูปภาพจากแท็บปัจจุบันแล้วเพิ่มลงในช่องคำถามของ Gemini ได้ทันที โดยเมื่อใช้งาน หน้าจอจะถูกไฮไลต์ ผู้ใช้เพียงแค่ลากเลือกพื้นที่ที่ต้องการ รูปภาพก็จะถูกวางลงในช่องป้อนข้อมูลโดยอัตโนมัติ ทำให้การสอบถามเป็นไปอย่างตรงจุดยิ่งขึ้น ฟีเจอร์นี้จะเปิดตัวพร้อมกับ Chrome 149 แบบค่อยเป็นค่อยไป หากยังไม่เห็น ให้ลองรีสตาร์ทเบราว์เซอร์

ในขณะเดียวกัน Google ยังประกาศว่า โมเดล Gemini 3.5 Flash ได้รับการเพิ่มเครื่องมือควบคุมคอมพิวเตอร์ (computer use) เรียบร้อยแล้ว นักพัฒนาสามารถเรียกใช้ความสามารถนี้ผ่าน Gemini API เพื่อให้โมเดลทำงานเหมือนมนุษย์บนเดสก์ท็อป ตัวอย่างเช่น 3.5 Flash สามารถ "เปิดแอป Gemini และแสดงรายการฟังก์ชันที่จัดหมวดหมู่แล้ว" เพื่อวิเคราะห์และโต้ตอบกับองค์ประกอบบนหน้าจอ ความก้าวหน้านี้ช่วยขยายขอบเขตการใช้งาน AI ในการทำงานอัตโนมัติและการทดสอบระบบอัจฉริยะ

จากฝั่งผู้ใช้ไปจนถึงฝั่งนักพัฒนา การอัปเดตทั้งสองช่วยลดขั้นตอนการใช้งาน AI และเพิ่มความสามารถในการทำงานของโมเดล ฟีเจอร์ "เลือกจากหน้าจอ" ช่วยให้การถามตอบในชีวิตประจำวันมีประสิทธิภาพมากขึ้น ขณะที่ Gemini 3.5 Flash ที่สามารถควบคุมคอมพิวเตอร์ได้จริง กำลังทำให้ Google ผสาน AI เข้ากับระบบนิเวศของ Chrome และเวิร์กโฟลว์ของนักพัฒนาได้ลึกซึ้งยิ่งขึ้น ซึ่งอาจนำไปสู่แอปพลิเคชันผู้ช่วยอัจฉริยะที่ทำงานด้วยภาพและการควบคุมได้มากขึ้นในอนาคต