Jelly View là một chế độ xem xung quanh trong suốt, cho phép nhìn thấy toàn bộ bên ngoài của chiếc xe đã được tích hợp trên Vinfast VFe34.
Tại sự kiện Ngày Trí tuệ nhân tạo 2022 (AI Day 2022) diễn ra vào hai ngày 26-27/8/2022, VinAI (thuộc Tập đoàn Vingroup) đã công bố 2 sản phẩm công nghệ giúp lái xe, bao gồm Hệ thống Giám sát người lái (Driver Monitoring System - DMS) và Tính năng quan sát toàn cảnh 360 độ nâng cao (Advanced Surround View Monitoring - ASVM).
Đây là hai sản phẩm mới nhất mà đội ngũ kỹ sư của VinAI đã phát triển thành công trong năm qua.

GS.TS Bùi Hải Hưng - Tổng giám đốc VinAI tặng hoa cho các diễn giả và đối tác tham gia AI Day 2022.
1. Hệ thống Giám sát người lái (Driver Monitoring System - DMS)
Mỗi năm, khoảng 1,3 triệu người tử vong trong các vụ tai nạn giao thông xe hơi, trong đó 60% do tài xế mất tập trung, 20% do tài xế ngủ gật.
Với mục tiêu tăng cường trải nghiệm lái xe an toàn, Hệ thống Giám sát Người lái và Hành khách (Driver and Occupants Monitoring System - DMS) được VinAI phát triển với các giải pháp thông minh tích hợp trong khoang xe, sử dụng camera chất lượng cao và công nghệ Trí tuệ nhân tạo để phân tích hành vi của tài xế, từ đó giảm thiểu nguy cơ do các hành vi thiếu tập trung gây ra.
Dựa trên công nghệ nhận diện khuôn mặt nằm trong top 6 thế giới (theo đánh giá của Viện Tiêu chuẩn và Công nghệ Mỹ - NIST năm 2020), giải pháp của VinAI sử dụng camera hồng ngoại và hệ thống cảm biến trên xe để nhận diện các trạng thái của người lái như buồn ngủ, mệt mỏi và các hành vi nguy hiểm khác như mất tập trung hoặc sử dụng điện thoại, nhằm cảnh báo kịp thời với các cấp độ khác nhau trong suốt hành trình.
Đặc biệt, hệ thống giám sát người lái của VinAI có thể hoạt động hiệu quả cả khi tài xế đang đeo kính râm hoặc trong điều kiện ánh sáng yếu vào ban đêm.
Giải pháp được VinAI phát triển rất linh hoạt, có khả năng tương thích với nhiều nền tảng phần cứng khác nhau và hỗ trợ nhiều vị trí lắp đặt camera khác nhau, giúp các nhà sản xuất ô tô tích hợp hệ thống DMS lên nền tảng phần cứng hiện có mà không cần đầu tư quá nhiều thời gian và chi phí cho việc chuyển đổi.

Hệ thống giám sát tài xế của VinAI sử dụng camera hồng ngoại nhận diện gương mặt tài xế và phát hiện các hành vi lái xe nguy hiểm như mệt mỏi, buồn ngủ (ngáp)...
Tính năng điều chỉnh gương tự động (Auto Mirror Adjustment - AMA)
Nhằm hỗ trợ lái xe một cách thuận tiện và dễ dàng hơn, VinAI đã phát triển tính năng điều chỉnh gương tự động. Trong các dòng xe truyền thống, việc điều chỉnh gương thường phải thực hiện thủ công bằng các nút bấm và thường đòi hỏi phải điều chỉnh nhiều lần để có góc nhìn phù hợp.
AMA giải quyết vấn đề này bằng cách sử dụng hệ thống điều chỉnh gương tự động, điều chỉnh gương chiếu hậu hai bên xe đến vị trí tối ưu dựa trên thông tin vị trí mắt của tài xế.
Đầu tiên, hệ thống ước tính vị trí mắt của người lái trong không gian ba chiều. Thường cần hai hoặc nhiều camera để giải quyết vấn đề này, nhưng với sự sáng tạo của đội ngũ kỹ sư, giải pháp mà VinAI áp dụng có thể dự đoán vị trí mắt chính xác chỉ với một DMS camera hồng ngoại duy nhất.
Sau đó, dựa trên vị trí tương đối của mắt so với gương chiếu hậu, các kỹ sư xây dựng thuật toán để tính toán góc quay chính xác và gửi tín hiệu điều chỉnh nhằm tối ưu hóa góc quan sát qua gương cho tài xế. Cuối cùng, gương nhận tín hiệu điều khiển từ bộ xử lý để xoay mặt gương đến vị trí mong muốn.
Tất cả những gì người lái cần làm là ngồi vào vị trí, bấm nút điều chỉnh gương và gương sẽ tự động điều chỉnh. Người lái chỉ cần kiểm tra và xác nhận.
Thông tin về cấu hình gương sẽ được lưu trữ trong dữ liệu của tài xế. Xe sẽ sử dụng thông tin này để tự động điều chỉnh gương cho những lần lái xe sau này. Tính năng AMA không chỉ giúp tài xế tiết kiệm thời gian điều chỉnh gương mà còn đề xuất vị trí điều chỉnh gương tối ưu, từ đó nâng cao tính an toàn khi lái xe.

Tính năng điều chỉnh gương tự động giúp người lái nhanh chóng có góc nhìn tối ưu nhất trước khi bắt đầu hành trình.
2. Tính năng quan sát toàn cảnh 360 độ nâng cao (Advanced Surround View Monitoring - ASVM)
Mỗi năm, chỉ tính riêng ở Mỹ, có 840.000 vụ tai nạn xảy ra do tài xế không thể quan sát được tại các điểm mù của xe. VinAI hy vọng tính năng quan sát toàn cảnh 360 độ (ASVM) sẽ trở nên phổ biến hơn, tính năng chỉ xuất hiện trên các dòng xe cao cấp trước đây.
Hệ thống này cung cấp cái nhìn toàn cảnh 360 độ bao gồm: tầm nhìn từ trên xuống, từ phía sau, bên cạnh bánh xe, và chế độ xem 3D để hỗ trợ người lái khi di chuyển qua những con đường đông đúc, hẹp hoặc trong bãi đậu xe.
ASVM giúp nâng cao trải nghiệm của người lái, giúp họ nhận biết rõ hơn về môi trường xung quanh xe và nhận diện các chướng ngại vật ở các điểm mù.
Điểm nổi bật của ASVM là chế độ xem 360 độ/3D mượt mà với độ phân giải cao được tái tạo từ bốn camera fisheye gắn xung quanh xe, sử dụng thuật toán ghép hình tiên tiến nhất. Người lái có thể tương tác với chế độ xem bằng cách vuốt sang bất kỳ hướng nào để xem toàn bộ xung quanh xe.
Hơn nữa, hệ thống này cũng giúp việc đỗ xe trở nên đơn giản hơn, đặc biệt với những người mới lái xe. ASVM tự động phát hiện các chỗ trống trong bãi đậu xe, hướng dẫn đỗ xe trong thời gian thực hoặc thậm chí tự động đỗ xe giúp tài xế.
Ngoài ra, ASVM cũng có khả năng ước lượng không gian trong các con đường hẹp để tính toán và xác định xem xe có thể đi qua hay không, đồng thời cung cấp những hỗ trợ cần thiết cho người điều khiển xe.
Chế độ xem trong suốt (Jelly View)
Jelly View là một chế độ xem bao quanh trong suốt, cho phép nhìn xuyên qua toàn bộ chiếc xe. Người lái có thể nhìn thấy thùng xe và khung xe từ phía trước, phía sau hoặc bên ngoài xe.
Bằng cách sử dụng hệ thống Jelly View, người lái có thể quan sát toàn bộ cảnh quan bên ngoài xe và chuyển đổi giữa các chế độ xem khác nhau thông qua bảng điều khiển trên màn hình.
Với chế độ 3D, người lái có thể nhìn thấy những điểm mù không thể quan sát được qua gương, từ đó, phát hiện các chướng ngại vật và tránh những tai nạn bất ngờ trên các con đường hẹp, đường xấu hoặc trong bãi đậu xe. ASVM hỗ trợ người lái quan sát toàn bộ phía trước, phía sau, bên trái, bên phải để điều chỉnh, đỗ xe trong bãi.
Ví dụ minh họa:

Chế độ quan sát 360 độ thông thường.

Chế độ xem trong suốt.

Hệ thống ASVM đã được tối ưu hóa để cung cấp chất lượng ảnh ghép tốt nhất trong phân khúc với hiệu suất cao và tiêu thụ tài nguyên thấp. Hệ thống có khả năng linh hoạt chạy trên nhiều nền tảng phần cứng khác nhau và tích hợp được với nhiều dòng xe thuộc nhiều phân khúc khác nhau.