1. Bước nhảy vọt từ trợ lý lệnh sang nhận thức ngữ cảnh

Trước đây, nếu bạn nhận được tin nhắn từ bạn bè chứa địa chỉ một quán cà phê và muốn lưu vào Ghi chú, bạn phải sao chép, thoát ứng dụng, mở Ghi chú và dán. Với On-Screen Awareness trên Siri thế hệ mới, bạn chỉ cần giữ phím nguồn hoặc nói: "Lưu địa chỉ này vào ghi chú Du lịch Hà Nội".

Siri lập tức quét các khối văn bản đang hiển thị trên màn hình hiện tại, nhận diện chuỗi ký tự chứa thông tin địa lý và tự động gọi API của ứng dụng Ghi chú để điền đúng vị trí mà bạn không cần chạm tay vào màn hình.

2. Hiểu đại từ chỉ định và ngữ cảnh liên ứng dụng

Khả năng hiểu ngữ cảnh màn hình giúp Siri loại bỏ hoàn toàn cảm giác gượng gạo của việc ra lệnh giọng nói:

  • Đại từ thay thế tự nhiên: Bạn đang xem ảnh chụp danh thiếp, chỉ cần nói "Thêm người này vào danh bạ và lưu số điện thoại ở góc dưới".
  • Tương tác xuyên ứng dụng: Đang trò chuyện trong Messages với bạn thân về một bài hát trên Apple Music, bạn ra lệnh "Mở bài hát cậu ấy vừa nhắc", Siri sẽ truy vết tên bài hát trong bong bóng chat và kích hoạt trình phát nhạc ngay lập tức.

3. Bảo mật kiến trúc On-Device Semantic Index

Để Siri hiểu bạn mà không thu thập dữ liệu cá nhân, Apple triển khai Personal Context Semantic Index cục bộ trên thiết bị. Mọi liên kết giữa email, lịch họp, tin nhắn và ảnh đều được lập chỉ mục vector mã hóa trong Secure Enclave, không bao giờ đồng bộ hóa lên máy chủ nếu không có sự cho phép rõ ràng.