Bản nâng cấp của Project Astra có thể trích xuất thông tin, nhắc nhở lịch trình và "sử dụng hộ" điện thoại mà không cần người dùng yêu cầu.

Tại sự kiện I/O 2025 diễn ra rạng sáng 21/5 (giờ Việt Nam), Google công bố một số tính năng mới của Project Astra. Ra mắt lần đầu năm 2024, Project Astra sử dụng mô hình AI đa phương thức (multimodal) để khai thác, phân tích hình ảnh và thông tin thị giác theo thời gian thực. Đây là tham vọng lớn của Google với mục tiêu giúp AI hữu ích hơn trong đời sống.

Sau thời gian thử nghiệm, một số tính năng của Project Astra như phản hồi giọng nói, khả năng ghi nhớ và tính toán cơ bản sẽ xuất hiện trên Gemini và các ứng dụng của Google.

Trong sự kiện, Google trình diễn một số tác dụng của Astra hỗ trợ cuộc sống thường ngày. Ngoài việc trả lời câu hỏi và sử dụng camera để ghi nhớ nơi để kính, Astra giờ đây có thể chủ động hoàn thành tác vụ mà không cần người dùng yêu cầu.

“Astra có thể chọn thời điểm nói chuyện dựa trên sự kiện chúng nhìn thấy. Nó quan sát liên tục và đưa ra phản hồi phù hợp”, Greg Wayne, nhà nghiên cứu tại DeepMind, cho biết.

Theo The Verge, tính năng trên có thể thay đổi cách hoạt động của AI. Thay vì chờ người dùng hướng camera và ra lệnh trợ giúp, Astra có thể liên tục theo dõi, lắng nghe và tự động hỗ trợ nếu cần thiết. Hiện tại, Google tập trung phát triển Astra cho smartphone và kính thông minh.

Wayne nêu một số ví dụ về cách hoạt động của Astra. Trong lúc làm bài tập về nhà, công cụ có thể theo dõi và lập tức cảnh báo khi phát hiện làm sai, thay vì chờ người dùng làm xong và yêu cầu kiểm tra.

Demis Hassabis, CEO DeepMind, cho biết việc đào tạo Astra tự chạy tác vụ là một trong những kỹ thuật khó. Ông gọi đó là khả năng “đọc vị tình huống” bởi AI cần xác định khi nào để hỗ trợ, thái độ, cách trợ giúp và khi nào cần im lặng. Đó là những hành động con người làm khá tốt, nhưng khó định lượng và nghiên cứu.

Nâng cấp tiếp theo của Astra là khai thác thông tin người dùng trên web và các sản phẩm của Google. Theo The Verge, công cụ có thể biết lịch trình để thông báo thời điểm rời khỏi nhà, đọc nội dung email để trích xuất số điện thoại khi check-in tại khách sạn…

Tính năng Highlighting của Project Astra, hỗ trợ quét vật thể rồi so sánh thông tin khai thác trong ứng dụng khác. Ảnh: Google.

“Mảnh ghép” cuối cùng của Astra là khả năng học cách sử dụng điện thoại Android. Trình diễn tại sự kiện, Bibo Xiu, đại diện bộ phận sản phẩm của DeepMind, hướng camera điện thoại đến một tai nghe Sony, yêu cầu Astra nhận diện model.

Sau khi Astra trả lời tai nghe có thể là Sony WH-1000XM4 hoặc WH-1000XM3, Xiu tiếp tục yêu cầu công cụ tìm tài liệu hướng dẫn sử dụng, sau đó giải thích cách kết nối với điện thoại. Sau khi Astra hướng dẫn, Xiu ngắt lời và yêu cầu chatbot kết nối giúp. Ngay lập tức, Astra mở phần cài đặt và tự thao tác.

Quá trình không hoàn toàn liền mạch khi Xiu phải cho phép Astra theo dõi màn hình điện thoại. Trong tương lai, Google hướng đến việc chatbot có thể theo dõi màn hình tự động.

Trong video khác của Google, một người yêu cầu Astra tìm hướng dẫn sử dụng xe đạp Huffy, sau đó tìm đến trang cụ thể chứa hướng dẫn sửa một bộ phận xe. Astra thậm chí có thể tìm video trên YouTube về cách loại bỏ một con ốc bị toét đầu, sau đó liên hệ cửa hàng gần nhất để tìm bộ phận thay thế. Mọi thứ diễn ra liền mạch trong phần trình diễn.

Dù chưa phát hành rộng rãi Astra, Google cho biết tính năng phân tích hình ảnh bằng Gemini Live sẽ phát hành cho toàn bộ người dùng iOS (trước đây chỉ hỗ trợ Android).

Trong tương lai, AI của Google không chỉ hoạt động theo lệnh, mà Astra sẽ giúp “thấu hiểu những thứ có thể thấy và chưa thể thấy tại thời điểm này”, theo chia sẻ của Xiu.