Ambarella, Lumentum, dan ON Semiconductor berkolaborasi dalam penginderaan 3D berbasis pemrosesan AI untuk perangkat AIoT generasi berikutnya
Ambarella, perusahaan silikon visi AI, Lumentum, perancang dan produsen produk optik dan fotonik inovatif, dan ON Semiconductor, penyedia solusi sensor gambar CMOS, telah bermitra untuk menghasilkan dua desain referensi bersama baru yang mereka katakan akan “ mempercepat penerapan perangkat kecerdasan buatan dari berbagai hal secara vertikal”.
Desain dibangun berdasarkan solusi bersama perusahaan sebelumnya untuk sistem akses nirsentuh.
Dengan menggabungkan data dari iluminator array VCSEL kinerja tinggi Lumentum dan sensor gambar ON Semiconductor menggunakan SoC AI Ambarella, tingkat akurasi yang lebih tinggi dan pengambilan keputusan yang lebih cerdas dapat dicapai pada perangkat AIoT generasi berikutnya untuk kontrol akses biometrik, kunci elektronik 3D dan aplikasi penginderaan cerdas lainnya.
Awalnya ditujukan untuk kontrol akses biometrik dan kunci elektronik, desain referensi baru ini juga dapat memenuhi kebutuhan kota pintar, gedung pintar, rumah pintar, dan perawatan kesehatan cerdas.
Selain itu, integrasi tingkat tinggi yang disediakan oleh solusi bersama ini secara signifikan menurunkan konsumsi daya sistem dan persyaratan desain termal sekaligus memungkinkan faktor bentuk produk yang jauh lebih kecil.
Fermi Wang, presiden dan CEO Ambarella, mengatakan:“Visi Ambarella adalah menggabungkan pemrosesan AI dengan 3D dan penginderaan penglihatan untuk menciptakan masa depan yang cerdas.
“Kolaborasi dengan Lumentum dan ON Semiconductor ini akan semakin memajukan konvergensi AI dan IoT untuk memungkinkan generasi baru sistem kontrol akses, sambil menginspirasi kategori baru produk penginderaan ambien – semuanya didukung oleh perpaduan sensor menggunakan prosesor penglihatan AI yang berinteraksi secara cerdas. dan secara diam-diam dengan orang-orang untuk memenuhi kebutuhan mereka yang terus berkembang.”
Téa Williams, wakil presiden senior dan manajer umum, penginderaan 3D di Lumentum, mengatakan:“Solusi bersama baru kami akan sangat meningkatkan akurasi perangkat AIoT di seluruh vertikal aplikasi – dimulai dengan kontrol akses biometrik dan kunci elektronik – memungkinkan mereka mengenali orang dan memprediksi kebutuhan mereka, daripada membutuhkan antarmuka manusia langsung.
“Banyak dari aplikasi ini akan memanfaatkan penginderaan 3D untuk menyuntikkan dimensi baru input data untuk pengambilan keputusan yang lebih baik. Sebagai contoh, menggunakan iluminasi titik berbasis VCSEL dengan resolusi lebih tinggi memungkinkan rentang penginderaan yang lebih panjang dan pengenalan wajah dengan akurasi yang lebih tinggi.
“Array VCSEL Lumentum yang terdepan di industri dan berperforma tinggi dengan zero field failures, yang digunakan di seluruh solusi gabungan ini, mendorong aplikasi baru dan membantu mewujudkan impian perangkat AIoT dengan kemampuan penginderaan 3D.”
Gianluca Colli, wakil presiden dan manajer umum, kelompok divisi sensor industri dan konsumen (ICSD) di ON Semiconductor, mengatakan:“Sensor gambar adalah mata untuk perangkat penginderaan cerdas. Kemampuan mereka untuk melihat lebih jauh dengan lebih detail memberikan lebih banyak informasi secara signifikan untuk pengambilan keputusan prosesor AI di perangkat AIoT.
“Teknologi sensor RGB-IR kami yang terdepan di industri, dikombinasikan dengan kemampuan ISP canggih dari SoC visi AI Ambarella, dapat menghadirkan gambar yang terlihat dan IR ke dalam perangkat secara bersamaan. Untuk solusi bersama generasi kedua ini, kami memanfaatkan umpan balik pelanggan untuk melipatgandakan resolusi sensor gambar RGB-IR kami menjadi 4K (8MP).”
Solusi AIoT gabungan baru dari ketiga perusahaan terdiri dari dua desain referensi dan kit pengembangan penginderaan 3D tambahan, masing-masing dikonfigurasi secara unik untuk memenuhi permintaan khusus aplikasi untuk kombinasi pemrosesan AI, penginderaan kedalaman 3D, dan penginderaan penglihatan:
Ditargetkan untuk pembaca kontrol akses biometrik generasi berikutnya, desain referensi Vision+ adalah solusi 4K pertama di industri AIoT yang melakukan penginderaan cahaya terstruktur 940nm kamera tunggal berdasarkan teknologi RGB-IR.
Ini juga yang pertama memanfaatkan solusi chip tunggal untuk pemrosesan mendalam, pemrosesan AI, dan pemrosesan video. Berdasarkan prosesor visi Ambarella CV22 CVflow AI, ini mencakup penginderaan cahaya terstruktur kamera tunggal yang didukung oleh teknologi VCSEL Lumentum, yang menampilkan jangkauan 2 meter, dan sensor gambar CMOS RGB-IR 4K (8MP) dari ON Semiconductor.
Ditargetkan pada kunci pintu elektronik pintar generasi berikutnya, atau eLocks, untuk aplikasi komersial dan residensial, desain referensi Saturnus adalah yang pertama di industri AIoT yang mengintegrasikan pemrosesan AI untuk penginderaan cahaya terstruktur kamera tunggal dan pemrosesan video boot cepat.
Ini didasarkan pada prosesor visi AI Ambarella CV25 CVflow dan mencakup kamera terstruktur-ringan yang didukung oleh teknologi VCSEL Lumentum dan sensor gambar AR0237CS 2MP RGB-IR dari ON Semiconductor.
Ditargetkan pada aplikasi penginderaan cerdas dan dengan peluang di seluruh vertikal, kit pengembangan berbasis prosesor visi CVflow AI seri CV2 Ambarella sekarang dapat dilengkapi dengan adaptor sensor ToF yang ditenagai oleh rangkaian VCSEL terdepan Lumentum. Adaptor sensor gambar RGB-IR 4K opsional juga tersedia untuk kit ini.
Kit pengembangan perangkat lunak terbuka (SDK) untuk prosesor visi AI CVflow Ambarella memungkinkan integrasi aplikasi pihak ketiga yang mudah sekaligus memungkinkan OEM untuk mengatasi persyaratan regional yang berbeda dengan satu platform (misalnya, menggunakan algoritme AI yang berbeda di wilayah yang berbeda).
Selain itu, SDK berbasis Linux yang tangguh ini memperluas kemampuan perangkat penginderaan tepi, menyederhanakan pengembangan produk, dan mempercepat waktu-ke-pasar melalui:
- Kemampuan pengembangan aplikasi khusus
- Dukungan untuk modalitas 3D yang berbeda, termasuk cahaya terstruktur dan ToF. Uniknya, satu SoC Ambarella menyediakan pemrosesan penginderaan 3D tanpa memerlukan prosesor kedalaman khusus atau prosesor host terpisah
- Kemampuan inferensi AI yang tinggi pada perangkat kamera untuk mengaktifkan beberapa jaringan saraf yang berjalan secara bersamaan
- Alat AI yang kuat untuk mendukung pengembangan dan migrasi jaringan saraf dalam
- ISP terintegrasi untuk menangani pemandangan yang menantang, termasuk rentang dinamis tinggi dan skenario cahaya rendah
- Prosesor Arm bawaan untuk menjalankan aplikasi pelanggan
- Perangkat keras keamanan terintegrasi, termasuk boot aman, OTP untuk menyimpan kunci enkripsi, dan teknologi Arm TrustZone untuk perbandingan kunci enkripsi yang aman
- Dukungan antarmuka periferal yang kaya untuk menyederhanakan desain sistem
Ketersediaan
Desain referensi bersama dan kit pengembangan ini diharapkan akan tersedia pada bulan Juni. Informasi lebih lanjut tersedia dari Ambarella.
