Những cập nhật mới nhất của Google dành cho Gemini trên điện thoại Android và Google Pixel 9

Sau sự kiện Made by Google hôm qua, bên cạnh các thiết bị mới thì Google cũng đưa ra một số cập nhật cho Gemini, LLM mạnh nhất của Google hiện tại cho nhu cầu sử dụng cá nhân. Trong chủ đề bài này mình sẽ tổng hợp lại một số điểm nổi bật và những gì Gemini có thể làm được bây giờ và trong tương lai, trên cả Pixel 9 series và cả những thiết bị Android về sau.

Gemini là LLM của Google, Pixel cũng là của Google nên dĩ nhiên nó sẽ phát huy và nổi bật nhất khi kết hợp với nhau. Trước tiên khi giới thiệu Pixel 9 series, Gemini trở thành trợ lý mặc định trên dòng điện thoại này, không phải Google Assistant nữa, chúng ta có thể tạm biệt Google Assistant trên điện thoại từ bây giờ là được rồi.

Kế đến, với dòng Pixel 9, bạn có thể sử dụng rất nhiều các tính năng AI trên mẫu điện thoại mới này của Google, với dòng Pixel thì bạn chưa bao giờ có được trải nghiệm AI nhiều như trên Pixel 9 series như hiện tại.

Gemini Live

Gemini Live là câu trả lời của Google dành cho OpenAI khi họ ra mắt khả năng voice chat với giọng tự nhiên và phong thái trả lời tự nhiên như con người. Google sẽ cho bạn 10 giọng nói tự nhiên để bạn có thể trò chuyện với Gemini, và cách mà chúng ta sử dụng cũng sẽ giống với ChatGPT, bạn có thể dùng để hỏi, sử dụng giọng nói của chính bạn thay vì phải gõ văn bản.

Hiện tại Gemini Live đã có sẵn cho toàn bộ người dùng gói Advanced, ở mọi nơi trên thế giới miễn là ngôn ngữ sử dụng để tương tác với Gemini là tiếng Anh. Google cho biết thời gian sắp tới sẽ hỗ trợ thêm các ngôn ngữ khác.

Gemini Live cũng có sẵn ở chế độ rảnh tay (hands-free): Bạn có thể tiếp tục nói chuyện với ứng dụng Gemini ở chế độ nền hoặc khi điện thoại của bạn bị khóa, để bạn có thể tiếp tục cuộc trò chuyện khi đang di chuyển, giống như cách bạn thực hiện một cuộc gọi điện thoại thông thường.

Với Gemini Live, bạn có thể nhờ Gemini đóng vai trò là một nhà tuyển dụng ở công ty bạn sắp phỏng vấn, bạn là một ứng viên và có thể luyện tập trước cùng nhau cho đến khi buổi phỏng vấn chính thức diễn ra. Trong một tương lai xa hơn một chút, Gemini Live có thể trả lời các câu hỏi mà người dùng dưa ra thông qua viewfinder của camera điện thoại. Đây là một phần trong project Astra, nếu sắp tới Gemini có được tính năng này, đó sẽ là một bước tiến lớn so với các LLM hiện đang có mặt trên điện thoại.

Gemini tích hợp sâu hơn vào các ứng dụng Google và Android

Google cho biết thời gian ngắn sắp tới hãng sẽ ra mắt các extension để tích hợp Gemini vào Keep, Tasks, YouTube Music, Calendar và một số ứng dụng khác. Google cũng đưa ra các ví dụ cụ thể ngay tại sự kiện, ví dụ như bạn có thể nhờ Gemini tìm hiểu về công thức của một món ăn mà bạn bè của bạn gửi qua Gmail, sau đó tiếp tục nhờ Gemini lên danh sách các nguyên liệu cần thiết và bỏ nó vào Keep để bạn đi mua. Tất cả trải nghiệm đó là xuyên suốt, tức là bạn không cần phải chuyển đổi qua lại giữa các ứng dụng.

Hay với ứng dụng Calendar (cái mà Google demo bị lỗi 2 lần 😁), bạn có thể nhờ Gemini check lịch của bạn xem ngày đó, giờ đó bạn có rảnh không để đi xem một buổi hoà nhạc, lịch biểu diễn bạn chụp và gửi cho Gemini, nó sẽ vừa xem lịch của buổi hoà nhạc, vừa kiểm tra lịch của bạn trên Calendar để cho bạn kết quả, thậm chí nó có thể nhắc bạn mua vé. Đó cũng là một trải nghiệm liền mạch và xuyên suốt.

Trải nghiệm đó còn cho phép bạn kéo thả hình ảnh được tạo từ Gemini vào Gmail hoặc Google Messages. Ngoài ra, bạn có thể nhờ Gemini tóm tắt nội dung của một video vlog về du lịch (tính năng Ask about this screen), sau đó lên danh sách các nhà hàng, địa điểm vui chơi nổi bật có trong video và đưa chúng vào Google Maps, lên lịch trình di chuyển sẵn cho bạn.

Bạn sẽ không cần phải có điện thoại Pixel để làm được điều này, chỉ cần là thiết bị Android có Gemini.

Điện thoại Google được tích hợp Gemini Nano với model Gemini 1.5 Flash

Kể từ Pixel 8, Google đã trang bị Gemini Nano cho điện thoại của mình, phục vụ cho các tính năng AI trên Pixel 8 series khi đó, có rất nhiều tính năng AI mà Google đã trang bị cho dòng Pixel 8 và bây giờ là Pixel 9 series, Google cũng cho biết, nhờ model Gemini 1.5 Flash mà các tác vụ xử lý AI có thể tương tác với người dùng tốt hơn, xử lý nhanh hơn và ít gặp lỗi hơn so với model trước đó.

Và với Gemini 1.5 Flash, không chỉ là các tính năng như trên, Pixel 9 series và có thể là các mẫu điện thoại Android trong tương lai có thể có được nhiều tính năng AI hơn, hiệu quả hơn, nhanh hơn. Hiện tại thì việc thực hiện các tác vụ AI trực tiếp trên thiết bị vẫn là mong muốn của một số người dùng vì liên quan đến quyền riêng tư.

Gemini mới trên Google Pixel 9 series có gì hay?

Dĩ nhiên đầu tiên sẽ là Gemini Live, hiện tại đến thời điểm này thì Gemini Live đã phát hành cho toàn bộ người dùng gói Gemini Advanced rồi, nhưng ngôn ngữ phải là tiếng Anh.

Pixel Screenshots

Ngoài Gemini Live thì Pixel Screenshots sẽ là tính năng cực kì hấp dẫn cho người dùng Pixel và có thể trong tương lai không xa các thiết bị Android khác cũng sẽ có tính năng này (nhưng dưới một cái tên khác chẳng hạn), hoặc là các nhà sản xuất khác sẽ học theo Google.

Pixel Screenshots về bản chất và cách hoạt động của nó giống với Microsoft Recall, nó sẽ ghi lại toàn bộ màn hình của người dùng, nhưng với Recall là tự động thì Pixel Screenshots là thủ công, khi bạn cần thì bạn chụp ảnh màn hình và trò chuyện với Gemini, ví dụ về một công thức nấu ăn, hỏi thêm về một sự kiện đang có trên màn hình và đó cũng là tính năng mà Google học hỏi theo Apple “Ask about this screen”.

Pixel Studio - trình tạo ảnh bằng AI đầu tiên

Đây là sự kết hợp giữa phần cứng (chip Tensor G4) và model AI Imagen 3 của Google vừa mới ra mắt. Đây cũng là mô hình khuếch tấn (diffusion model) đầu tiên chạy trên thiết bị, đặc biệt là một thiết bị của Google. Mô hình Imagen 3 vẫn sẽ chạy trên cloud, nhưng không giống các thiết bị Pixel hay Samsung Galaxy, việc tạo ảnh bằng AI có thể được xử lý 1 phần ở trên chính thiết bị của người dùng.

Ứng dụng thời tiết được tối ưu theo ngữ cảnh thời gian thực

Giống với việc tạo hình nền AI theo ngữ cảnh của Samsung Galaxy, hình ảnh sẽ thay đổi về màu sắc và trạng thái tuỳ vào thời tiết ngày hôm đó, thay đổi theo ngữ cảnh sáng, trưa, chiều và tối khuya.

Ngoài ra, với Gemini Nano, ứng dụng thời tiết trên Pixel 9 series có thể tổng hợp báo cáo thời tiết chính xác hơn, cải thiện khả năng dự báo thời tiết với độ chính xác cao hơn.

Add Me - “Photoshop” thêm người trong khung ảnh cực kì đơn giản

Với tính năng Add Me, bạn có thể dễ dàng thêm một ai đó vào khung hình theo cách đơn giản và dễ dàng hơn xưa nhiều. Ví dụ bạn muốn chụp ảnh ba người, thay vì phải nhờ một người khác, Add Me sẽ làm thay phần đó, bạn vẫn sẽ yên tâm rằng mình sẽ có ở trong khung hình, không cần người lạ giúp, cũng chẳng cần chân máy.

Cách thức chụp ảnh đó là bạn sẽ chụp tấm ảnh đầu tiên với 2 người, sau đó chụp tấm ảnh thứ hai với người còn lại (là người ban đầu cầm điện thoại chụp 2 người trước), điện thoại sẽ hiển thị hình ảnh preview của hai người trước, người còn lại chỉ cần đứng vào vị trí nào đó còn trống trong khung hình, như vậy là bạn đã có thể có được bức ảnh chụp nhóm mà không lo sợ bị thiếu bất kì một ai.

Google cũng cải tiến khả năng chụp ảnh panorama trong điều kiện thiếu sáng, và Google cũng cho biết rằng đây là khả năng chụp ảnh panorama thiếu sáng tốt nhất trên smartphone hiện tại.

Nhờ Gemini tạo danh sách mua sắm trong Google Keep

Tính năng này hiện tại mới chỉ giới hạn cho các thiết bị Pixel với tài khoản Google One AI Premium. Nhờ Gemini tích hợp trong Google Keep, bạn có thể nhờ nó lên danh sách mua sắm các vật dụng trong nhà, hoặc lên danh sách mua sắm trong 1 tuần hoặc khoảng thời gian mong muốn.

Để có thể có được những gợi ý chính xác, Google cho biết bạn nên cụ thể để Gemini có thể hoạt động hiệu quả, ví dụ như gia đình bạn có bao nhiêu người, có người nào ăn chay hay không….

Call Notes - tóm tắt nội dung cuộc gọi

Một tính năng sẽ cần thiết khi bạn nghe các cuộc gọi quan trọng, Call Notes sẽ giúp tổng hợp các thông tin quan trọng trong cuộc gọi của bạn nếu cần, ví dụ thời gian điểm hẹn, số điện thoại, địa chỉ hay các thông tin khác.

Để bảo vệ quyền riêng tư, Call Notes chạy hoàn toàn trên thiết bị và mọi người trong cuộc gọi sẽ được thông báo nếu bạn đã kích hoạt tính năng này.