Ambarella, Lumentum, dan ON Semiconductor Ungkap Solusi 3D Sensing Berbasis AI untuk Perangkat AIoT Generasi Depan
Ambarella, perusahaan silikon visi AI, Lumentum, desainer dan produsen produk optik dan fotonik inovatif, dan ON Semiconductor, penyedia solusi sensor citra CMOS, telah bekerjasama untuk menghasilkan dua referensi desain bersama baru yang menurutnya akan “mempercepat penerapan perangkat artificial intelligence of things di seluruh vertikal”.
Desain ini berbasis pada solusi bersama sebelumnya perusahaan untuk sistem akses naskah nirkabel.
Dengan menggabungkan data dari penerang array VCSEL berkinerja tinggi Lumentum dan sensor citra ON Semiconductor menggunakan AI SoC Ambarella, tingkat akurasi yang lebih tinggi dan pengambilan keputusan yang lebih cerdas dapat dicapai dalam perangkat AIoT generasi depan untuk kontrol akses biometrik, kunci elektronik 3D dan aplikasi sensing cerdas lainnya.
Awalnya dimaksudkan untuk kontrol akses biometrik dan kunci elektronik, referensi desain baru ini juga dapat menjawab kebutuhan kota cerdas, gedung cerdas, rumah cerdas dan perawatan kesehatan cerdas.
Selainnya, tingkat integrasi tinggi yang disediakan oleh solusi bersama ini secara signifikan menurunkan konsumsi daya sistem dan persyaratan desain termal sambil memungkinkan bentuk produk yang jauh lebih kecil.
Fermi Wang, presiden dan CEO Ambarella, berkata: “Visi Ambarella adalah menggabungkan pemrosesan AI dengan sensing 3D dan visi untuk menciptakan masa depan intelijen ambien.
“Kolaborasi ini dengan Lumentum dan ON Semiconductor akan memajukan konvergensi AI dan IoT untuk memungkinkan generasi baru sistem kontrol akses, sambil menginspirasi kategori produk sensing ambien yang baru – semuanya didukung oleh gabungan sensor menggunakan prosesor visi AI yang berinteraksi secara cerdas dan tidak mengganggu dengan orang untuk memenuhi kebutuhan mereka yang terus berkembang.”
Téa Williams, senior vice president dan general manager, 3D sensing di Lumentum, berkata: “Solusi bersama baru kami akan sangat meningkatkan akurasi perangkat AIoT di seluruh vertikal aplikasi – dimulai dari kontrol akses biometrik dan kunci elektronik – memungkinkan mereka untuk mengenali orang dan memprediksi kebutuhan mereka, daripada memerlukan antarmuka manusia langsung.
“Banyak aplikasi ini akan mengambil keuntungan dari sensing 3D untuk menyuntikkan dimensi baru input data untuk pengambilan keputusan yang lebih baik. Sebagai contoh, penggunaan penerangan spot berbasis VCSEL resolusi lebih tinggi memungkinkan jangkauan sensing yang lebih lama dan pengenalan wajah yang lebih akurat.
“Array VCSEL terdepan dan berkinerja tinggi Lumentum dengan nol kegagalan lapangan, yang digunakan di seluruh solusi bersama ini, mendorong aplikasi baru dan membantu mewujudkan mimpi perangkat AIoT dengan kemampuan sensing 3D.”
Gianluca Colli, vice president dan general manager, divisi sensor industri dan konsumen (ICSD) grup di ON Semiconductor, berkata: “Sensor citra adalah mata untuk perangkat sensing cerdas. Kemampuan mereka untuk melihat lebih jauh dengan lebih detail memberikan informasi yang signifikan lebih banyak untuk pengambilan keputusan prosesor AI di perangkat AIoT.
“Teknologi sensor RGB-IR terdepan industri kami, dikombinasikan dengan kemampuan ISP canggih AI vision SoC Ambarella, dapat membawa citra terlihat dan IR ke dalam perangkat secara bersamaan. Untuk generasi kedua solusi bersama kami, kami memanfaatkan umpan balik pelanggan untuk meningkatkan resolusi sensor citra RGB-IR kami empat kali lipat menjadi 4K (8MP).”
Solusi AIoT bersama baru ketiga perusahaan ini terdiri dari dua referensi desain dan development kit sensing 3D tambahan, masing-masing dikonfigurasi secara unik untuk menanggapi kebutuhan spesifik aplikasi untuk kombinasi pemrosesan AI, sensing kedalaman 3D dan sensing visi:
Ditargetkan untuk pembaca kontrol akses biometrik generasi depan, referensi desain Vision+ adalah solusi 4K pertama di industri AIoT untuk melakukan sensing terstruktur cahaya satu kamera 940nm berbasis teknologi RGB-IR.
Ini juga pertama untuk memanfaatkan solusi satu chip untuk pemrosesan kedalaman, pemrosesan AI dan pemrosesan video. Berbasis pada AI vision processor Ambarella CV22 CVflow, ini mencakup sensing terstruktur cahaya satu kamera yang didukung oleh teknologi VCSEL Lumentum, dengan jangkauan 2 meter, dan sensor citra CMOS RGB-IR 4K (8MP) dari ON Semiconductor.
Ditargetkan untuk kunci pintu elektronik cerdas generasi depan, atau eLocks, untuk aplikasi komersial dan residential, referensi desain Saturn adalah yang pertama di industri AIoT untuk mengintegrasikan pemrosesan AI untuk sensing terstruktur cahaya satu kamera dan pemrosesan video boot cepat.
Ini didasarkan pada AI vision processor Ambarella CV25 CVflow dan mencakup kamera terstruktur cahaya yang didukung oleh teknologi VCSEL Lumentum dan sensor citra RGB-IR AR0237CS 2MP dari ON Semiconductor.
Ditargetkan untuk aplikasi sensing cerdas dan dengan peluang di seluruh vertikal, development kit AI vision processor CVflow Ambarella CV2 series sekarang dapat dilengkapi dengan adapter sensor ToF yang didukung oleh array VCSEL terdepan Lumentum. Adapter sensor citra RGB-IR 4K opsi juga tersedia untuk kit ini.
SDK pengembangan perangkat lunak open-source untuk AI vision processor CVflow Ambarella memungkinkan integrasi mudah aplikasi pihak ketiga sambil memungkinkan OEM untuk menanggapi persyaratan regional yang berbeda dengan satu platform (misalnya, menggunakan algoritma AI yang berbeda di berbagai wilayah).
Selainnya, SDK berbasis Linux yang andal ini memperluas kemampuan perangkat sensing tepi, menyederhanakan pengembangan produk dan mempercepat waktu ke pasar melalui:
- Kemampuan pengembangan aplikasi khusus
- Dukungan untuk berbagai modalitas 3D, termasuk cahaya terstruktur dan ToF. Secara unik, satu SoC Ambarella menyediakan pemrosesan sensing 3D tanpa memerlukan prosesor kedalaman khusus atau prosesor host terpisah
- Kemampuan inferensi AI tinggi pada perangkat kamera untuk memungkinkan beberapa jaringan saraf berjalan secara bersamaan
- Alat AI yang andal untuk mendukung pengembangan dan migrasi jaringan saraf dalam
- ISP terintegrasi untuk menangani scene yang menantang, termasuk rentang dinamis tinggi dan skenario cahaya rendah
- Prosesor Arm bawaan untuk menjalankan aplikasi pelanggan
- Hardware keamanan terintegrasi, termasuk secure boot, OTP untuk menyimpan kunci enkripsi dan teknologi Arm TrustZone untuk perbandingan kunci enkripsi yang aman
- Dukungan antarmuka periferal yang kaya untuk menyederhanakan desain sistem
Ketersediaan
Referensi desain dan development kit bersama ini diramalkan akan tersedia pada Juni. Informasi lebih lanjut tersedia dari Ambarella.
