Blog về công ty Cảm biến tầm nhìn dựa trên sự kiện tốc độ cao SONY IMX646-AAMR-C 1/2.5 inch

Công ty TNHH Điện tử Mingjiada Thâm Quyến cung cấp thiết bị SonyIMX646-AAMR-C, cảm biến hình ảnh tốc độ cao dành cho sự kiện 1/2,5 inch với khoảng 0,92 triệu điểm ảnh hiệu dụng.

SonyIMX646-AAMR-Clà cảm biến thị giác theo sự kiện (EVS) tốc độ cao xếp chồng thế hệ mới do Sony Semiconductor phối hợp với Prophesee phát triển, có định dạng quang học 1/2,5 inch (đường chéo 7,1 mm). Nhờ kiến ​​trúc pixel cải tiến và cơ chế cảm biến sự kiện, nó hoàn toàn thoát khỏi giới hạn tốc độ khung hình của các cảm biến hình ảnh dựa trên khung hình truyền thống. Với những ưu điểm cốt lõi như thu thập sự kiện không đồng bộ, độ trễ cực thấp ở mức micro giây và dải động cực cao, nó rất phù hợp với nhu cầu nhận biết cảnh động tốc độ cao. Nó đóng vai trò là thành phần trực quan cốt lõi hiệu suất cao cho tự động hóa công nghiệp, robot thông minh, bảo mật cao cấp cũng như các ứng dụng đo lường và điều khiển thông minh.

I. Vị trí cốt lõi và lợi thế về kiến ​​trúc của IMX646-AAMR-C

IMX646-AAMR-C là cảm biến hướng sự kiện, độ phân giải cao được thiết kế cho các ứng dụng thị giác tốc độ cao, cao cấp. Không giống như các cảm biến CMOS truyền thống, hoạt động ở tốc độ khung hình cố định với mức hiển thị khung hình tuần tự và đầu ra chung, cảm biến này sử dụng kiến ​​trúc phát hiện sự kiện không đồng bộ ở cấp độ pixel. Mỗi pixel giám sát độc lập sự thay đổi độ sáng trong thời gian thực, chỉ xuất ra tọa độ pixel, dấu thời gian, dữ liệu phân cực độ sáng khi phát hiện thấy sự thay đổi đột ngột về độ sáng. Các khu vực tĩnh không có thay đổi về độ sáng sẽ không tạo ra dữ liệu dư thừa, từ đó hiện thực hóa chế độ cảm biến 'thu thập theo yêu cầu, đầu ra hiệu quả' ở cấp độ phần cứng.

Về mặt phần cứng, nó sử dụng quy trình pixel xếp chồng hoàn thiện của Sony và có kích thước pixel siêu nhỏ dẫn đầu ngành là 4,86μm. Điều này đảm bảo độ phân giải độ phân giải cao 1280×720 (khoảng 920.000 pixel hiệu dụng) đồng thời giảm đáng kể dấu chân vật lý của cảm biến, cân bằng độ chính xác của hình ảnh với nhu cầu thiết kế thiết bị nhỏ gọn. Con chip này tích hợp mạch chuyển đổi I/V logarit, bộ phát hiện thay đổi độ sáng và mạch phân xử, cho phép nhận dạng sự kiện, lọc tín hiệu và điều hòa dữ liệu mà không cần chip phụ trợ bên ngoài. Điều này tăng cường đáng kể khả năng tích hợp và giảm độ phức tạp của việc phát triển phần cứng cho thiết bị cuối.

II.IMX646-AAMR-CThông số phần cứng cốt lõi và hiệu suất vượt trội

Tận dụng thiết kế pixel độc quyền và tối ưu hóa mạch, cảm biến này đạt được hiệu suất dẫn đầu ngành trên ba khía cạnh cốt lõi: tốc độ phản hồi, dải động và hiệu suất trong điều kiện ánh sáng yếu. Tất cả các thông số cốt lõi đã trải qua quá trình hiệu chuẩn cấp công nghiệp để đảm bảo sự phù hợp với các môi trường vận hành đòi hỏi khắt khe.

1. Độ trễ cực thấp và phản hồi tốc độ cao

cácIMX646-AAMR-Ckhắc phục các giới hạn về tốc độ khung hình của các cảm biến truyền thống để đạt được cảm biến thời gian thực hoàn toàn theo hướng sự kiện. Trong điều kiện ánh sáng tiêu chuẩn 1000 lux, độ trễ phản hồi tổng thể là ≤800 μs, với độ trễ cao nhất thấp tới 300 μs. Điều này cho phép ghi lại chính xác quỹ đạo tức thời của các mục tiêu di chuyển tốc độ cao trong khoảng thời gian mili giây, loại bỏ hoàn toàn hiện tượng nhòe chuyển động và độ trễ hình ảnh liên quan đến hình ảnh truyền thống. Ngay cả trong điều kiện ánh sáng cực yếu 0,3 lux, độ trễ vẫn duy trì trong khoảng 9000 μs, cân bằng giữa phản hồi tốc độ cao với khả năng thích ứng trong điều kiện ánh sáng yếu. Điều này khiến nó hoàn toàn phù hợp cho các tình huống như kiểm tra dây chuyền sản xuất tốc độ cao, tránh chướng ngại vật động cho máy bay không người lái và theo dõi chuyển động tốc độ cao.

2. Hình ảnh dải động cực cao

Được trang bị mạch pixel phản hồi logarit tích hợp,IMX646-AAMR-Cđạt được dải động vượt quá 110dB, bao phủ phạm vi chiếu sáng đặc biệt rộng từ 30 mLux đến 100 kLux. Nó có khả năng xử lý các tình huống phức tạp liên quan đến ánh sáng mạnh trực tiếp, các khu vực có ánh sáng yếu và sự chuyển đổi nhanh chóng giữa ánh sáng và bóng tối. Trong điều kiện ngược sáng, giám sát cường độ cao ngoài trời và môi trường công nghiệp với điều kiện sáng và tối xen kẽ, nó bảo toàn hiệu quả chi tiết ở cả vùng sáng và tối, loại bỏ các vấn đề phơi sáng quá mức và thiếu sáng, với khả năng chịu hình ảnh vượt xa so với cảm biến dựa trên khung truyền thống.

3. Hình ảnh ổn định, ít nhiễu

cácIMX646-AAMR-Ccảm biến cung cấp khả năng khử nhiễu nền tuyệt vời. Dưới mức chiếu sáng tiêu chuẩn 1000 lux, tốc độ sự kiện nền chỉ là 0,1 Hz; trong điều kiện ánh sáng yếu 0,3 lx, tốc độ sự kiện nền không cao hơn 5 Hz. Độ không đồng nhất của ngưỡng tương phản pixel là ≤6%, giúp giảm hiệu quả đầu ra của các sự kiện nhiễu giả, giảm tải tính toán cho các thuật toán lọc xuôi dòng và đảm bảo độ chính xác và ổn định của nhận thức trong các cảnh động tốc độ cao.

4. Thông số phần cứng cơ bản

cácIMX646-AAMR-Ccó định dạng quang học 1/2,5 inch tiêu chuẩn, với độ phân giải pixel hiệu dụng là 1280 (H) × 720 (V), tổng cộng khoảng 0,92 triệu pixel hiệu dụng và kích thước pixel là 4,86 ​​μm × 4,86 ​​μm; Nó sử dụng gói LGA 156 chân với kích thước bên ngoài là 13mm × 13mm, mang lại kiểu dáng nhỏ gọn phù hợp để tích hợp vào các thiết bị thu nhỏ; nguồn điện bao gồm ba đường dây riêng biệt: 3.0V cho analog, 1.1V và 1.8V cho kỹ thuật số, với khả năng kiểm soát mức tiêu thụ điện năng tuyệt vời, giúp nó phù hợp để hoạt động liên tục trong thời gian dài.

III. cácIMX646-AAMR-CCác tính năng thông minh mở rộng của

IMX646-AAMR-C tích hợp nhiều chức năng xử lý hình ảnh và tối ưu hóa sự kiện độc quyền. Các tham số có thể được cấu hình linh hoạt thông qua các thanh ghi để đáp ứng các yêu cầu nhận thức tùy chỉnh trong các tình huống khác nhau, mang lại chức năng đặc biệt và khả năng mở rộng.

- Điều chỉnh tham số đa chiều: Hỗ trợ tùy chỉnh ngưỡng tương phản, độ trễ phản hồi và thời gian chết. Kết hợp với tính năng lọc giảm nhiễu tương tự, điều này cho phép tối ưu hóa chính xác đầu ra sự kiện dựa trên ánh sáng cảnh và tốc độ chuyển động, đáp ứng các yêu cầu phát hiện có độ chính xác khác nhau.

- Thu thập ROI linh hoạt: Hỗ trợ ba loại chức năng ROI—định nghĩa vùng tùy ý thông qua ma trận, chế độ cửa sổ và cắt xén kỹ thuật số—cho phép khóa các vùng phát hiện mục tiêu và che các vùng hình ảnh không liên quan, nhờ đó giảm thêm khối lượng dữ liệu đầu ra và nâng cao hiệu quả phát hiện.

- Chức năng xử lý sự kiện chuyên nghiệp: Chức năng chống nhấp nháy, lọc sự kiện và thống kê tỷ lệ sự kiện tích hợp tự động lọc ra các sự kiện không hợp lệ do nhấp nháy ánh sáng và nhiễu môi trường; Hỗ trợ tạo mặt nạ pixel và đảo ngược phân cực sự kiện để phù hợp với logic xử lý thuật toán đa dạng.

- Cơ chế đồng bộ hóa đa thiết bị: Hỗ trợ chế độ master-slave để vận hành đồng bộ nhiều cảm biến, cho phép đồng bộ hóa thời gian chính xác trong hệ thống thị giác nhiều camera nhằm đáp ứng nhu cầu của các ứng dụng cao cấp như tái tạo 3D, phạm vi âm thanh nổi và phát hiện cộng tác quy mô lớn.

- Hỗ trợ nâng cao nhận thức về môi trường: Nhiệt kế và máy đo lux tích hợp (chế độ phát hiện kép cho độ sáng tuyệt đối và tương đối) cho phép thu thập dữ liệu về nhiệt độ vận hành thiết bị và ánh sáng xung quanh theo thời gian thực, cung cấp hỗ trợ dữ liệu để điều chỉnh thích ứng các thông số hình ảnh và nâng cao khả năng thích ứng với môi trường của thiết bị.

IV.IMX646-AAMR-CThông số kỹ thuật đầu ra dữ liệu và giao diện tốc độ cao

Để đáp ứng yêu cầu truyền tải dữ liệu sự kiện tốc độ cao,IMX646-AAMR-Cđược trang bị giao diện truyền tốc độ cao chế độ kép, hỗ trợ chuyển đổi cấu hình linh hoạt để phù hợp với các thiết bị đầu cuối có yêu cầu băng thông khác nhau. Giao diện bao gồm hai chế độ truyền: MIPI (có thể chuyển đổi giữa 1 kênh và 2 kênh) và SLVS (có thể chuyển đổi giữa 2 kênh và 4 kênh). Băng thông truyền tốc độ cao đảm bảo đầu ra không có độ trễ của khối lượng lớn dữ liệu sự kiện tức thời, loại bỏ các vấn đề tắc nghẽn và mất dữ liệu.

Nó cũng tương thích với cả EVT 2.1 và EVT 3.0, hai định dạng đầu ra sự kiện chính thống. EVT 3.0 sử dụng chế độ nén mã hóa 16 bit, giúp giảm đáng kể yêu cầu lưu trữ và băng thông truyền dữ liệu. Điều này giúp giảm tải một cách hiệu quả tải tính toán trên chip máy chủ phụ trợ, nâng cao tốc độ phản hồi và độ ổn định vận hành của toàn bộ hệ thống thị giác, đồng thời làm cho hệ thống này phù hợp để triển khai trong các thiết bị nhúng nhẹ.

V. Kịch bản ứng dụng cốt lõi củaIMX646-AAMR-C

Tận dụng các lợi thế toàn diện về tốc độ cao, độ trễ thấp, dải động cao và mức tiêu thụ điện năng tính toán thấp, cảm biến này phù hợp lý tưởng với nhiều tình huống cảm biến thị giác động tốc độ cao khác nhau, với nhiều lĩnh vực ứng dụng cốt lõi:

- Sản xuất thông minh công nghiệp: Phát hiện khuyết tật dây chuyền lắp ráp tốc độ cao, đo kích thước động của các bộ phận chính xác, theo dõi quỹ đạo chuyển động theo thời gian thực của cánh tay robot cũng như giám sát độ rung và dịch chuyển của thiết bị. Tận dụng độ trễ ở mức micro giây để đạt được khả năng kiểm soát chất lượng và chuyển động theo thời gian thực có độ chính xác cao.

- Robot thông minh: Tránh chướng ngại vật động, lập mô hình môi trường theo thời gian thực và theo dõi con người đối với robot dịch vụ và robot di động công nghiệp. Cho phép nhận biết môi trường tốc độ cao mà không cần sức mạnh tính toán cao, nâng cao độ nhạy phản ứng chuyển động của robot.

- Giám sát an ninh cao cấp: Chụp mục tiêu động cả ngày lẫn đêm ngoài trời, theo dõi người đi bộ và phương tiện di chuyển nhanh, đồng thời giám sát trong các tình huống ánh sáng ngược sáng và cường độ cao. Với dải động cực cao và độ trễ thấp, nó giải quyết các vấn đề như nhòe chuyển động khi chuyển động tốc độ cao và lỗi hình ảnh trong các cảnh có độ tương phản cao mà các hệ thống giám sát truyền thống gặp phải.

- Nghiên cứu khoa học và đo lường chuyên ngành: Quan sát thí nghiệm khoa học tốc độ cao, giám sát và điều khiển động các thiết bị chính xác, tránh chướng ngại vật tốc độ cao ở độ cao thấp cho máy bay không người lái và nhận thức động cho trò chơi tương tác—tất cả các tình huống đòi hỏi độ chính xác và hiệu suất thời gian thực nghiêm ngặt.

VI. Lợi thế cạnh tranh cốt lõi củaIMX646-AAMR-C

So với các cảm biến hình ảnh dựa trên khung hình truyền thống và các cảm biến hướng sự kiện tương tự, ưu điểm cốt lõi của SonyIMX646-AAMR-Cnằm ở bốn lĩnh vực chính: Thứ nhất, hiệu suất thời gian thực vô song, với độ trễ ở mức micro giây giúp giải phóng nó khỏi những hạn chế về tốc độ khung hình để ghi lại các chi tiết động thoáng qua; thứ hai, hiệu quả dữ liệu đặc biệt, chỉ xuất ra các sự kiện động hợp lệ trong khi giảm đáng kể dữ liệu dư thừa, từ đó cắt giảm hơn 50% chi phí điện toán và băng thông; Thứ ba, khả năng thích ứng môi trường mạnh mẽ: dải động cực rộng kết hợp với thiết kế độ ồn cực thấp đảm bảo phù hợp với các điều kiện hoạt động phức tạp, bao gồm cả ngày và đêm, chuyển tiếp giữa sáng và tối, môi trường có cả ánh sáng mạnh và yếu; thứ tư, khả năng tích hợp cao và dễ triển khai: một bộ đầy đủ các mạch xử lý tín hiệu và chức năng điều chỉnh được tích hợp sẵn, cùng với các giao diện tốc độ cao được tiêu chuẩn hóa, rút ​​ngắn đáng kể chu trình R&D cho các sản phẩm của người dùng cuối và tạo điều kiện cho sản xuất hàng loạt quy mô lớn.

VII. Tóm tắt củaIMX646-AAMR-C

Cảm biến tầm nhìn theo sự kiện tốc độ cao 1/2,5 inch của Sony IMX646-AAMR-C kết hợp công nghệ xử lý xếp chồng CMOS tiên tiến của Sony với công nghệ cảm biến sự kiện hoàn thiện của Prophesee, giải quyết những thiếu sót của cảm biến tầm nhìn truyền thống trong các cảnh động tốc độ cao, điều kiện ánh sáng phức tạp và các ứng dụng nhúng có công suất tính toán thấp. Độ phân giải độ phân giải cao, độ trễ cực thấp ở mức micro giây, dải động cực cao và khả năng tích hợp nhẹ khiến nó trở thành thành phần cốt lõi được ưu tiên cho các hệ thống thị giác thế hệ tiếp theo trong tự động hóa công nghiệp, robot thông minh và các ứng dụng bảo mật cao cấp, thúc đẩy sự phát triển thông minh của thị giác máy từ 'hình ảnh dựa trên khung' đến 'nhận thức theo sự kiện'.