Sistem dua kamera memantau pengemudi dan jalan dengan satu AI SoC

dashcam baru KeepTruckin, berdasarkan sistem CV22 Ambarella pada sebuah chip, menggunakan AI untuk memantau pengemudi truk dan kendaraan komersial lainnya.

Sistem pemantauan pengemudi telah menjadi bagian penting dari percakapan dalam keselamatan otomotif. Sementara sebagian besar diskusi pemantauan pengemudi telah seputar penggunaannya untuk individu di mobil penumpang, ada pasar besar di sektor kendaraan komersial untuk memantau pengemudi di truk mereka untuk memastikan keselamatan dan mencoba mencegah kecelakaan, serta memungkinkan manajer armada untuk menilai risiko dan menurunkan biaya asuransi.

Melayani pasar ini, perusahaan teknologi manajemen armada KeepTruckin minggu ini mengatakan pihaknya bermitra dengan perusahaan edge artificial intelligence (AI) vision system on chip (SoC) Ambarella untuk mengembangkan dashcam aftermarket baru untuk kendaraan komersial yang lebih besar. Dashcam baru menggunakan SoC Ambarella CV22 tunggal untuk secara bersamaan menyediakan AI dan pemrosesan gambar untuk sistem kamera gandanya, yang mengintegrasikan satu kamera untuk sistem bantuan pengemudi canggih depan (ADAS) dengan perekaman insiden, dan kamera RGB-IR kedua untuk sistem pemantauan pengemudi (DMS) dengan perekaman pengemudi.

Spesifikasi kinerja per watt CV22 juga memungkinkan dasbor AI kecil untuk menjalankan algoritme AI milik KeepTruckin untuk deteksi perilaku berisiko tinggi secara real-time dan peringatan aktif langsung di perangkat dengan pembuangan panas minimal.

EE Times berbicara dengan para eksekutif dari KeepTruckin dan Ambarella untuk mengetahui lebih lanjut tentang pengembangan produk. Jai Ranganathan, SVP untuk produk di KeepTruckin, mengatakan, “Keselamatan pengemudi menjadi lebih penting dari sebelumnya, terutama karena ada lebih banyak tuntutan hukum terhadap operator komersial. Jadi, konsep dashcam menjadi sangat populer. Kami bermitra dengan Ambarella untuk mengembangkan dashcam generasi berikutnya. Metrik utama bagi kami saat melihat chip mereka adalah inferensi per Watt; kinerja relatif terhadap biaya juga penting. Kami perlu melakukan hal-hal seperti deteksi kedalaman dengan satu lensa, yang bisa jadi sulit.”

Dia mengatakan bahwa seluruh proses, dari awal hingga dashcam keluar hari ini, memakan waktu sekitar 18 bulan. “Faktor terbesar bagi kami [dalam memungkinkan waktu cepat ini untuk memasarkan] adalah memiliki mitra yang dapat membantu seluruh proses pengembangan. Jika tidak, tidak mungkin untuk mencapai pasar secepat itu.”

Direktur produk KeepTruckin, Abhishek Gupta, menambahkan, “Dukungan pengembang sangat bermanfaat, terutama karena kami membangun ini selama pandemi ketika banyak orang bekerja dari jarak jauh.”

Ranganathan mengatakan bahwa dasbor AI KeepTruckin memanfaatkan AI edge Ambarella dan kinerja pemrosesan penglihatan untuk menghadirkan fitur-fitur canggih berbasis AI yang mendeteksi perilaku berisiko tinggi dengan akurasi dan efisiensi tinggi. “Inovasi manajemen armada kami yang berkelanjutan dimungkinkan oleh rangkaian Ambarella yang dapat diskalakan dari CVflow AI vision SoCs, yang semuanya didukung oleh SDK umum yang kuat, memungkinkan pendekatan platform untuk pengembangan produk kami.”

Memberikan perspektif analis, Ian Riches, VP untuk praktik otomotif dan direktur di Strategy Analytics, berkomentar, “Pilihan Ambarella SoCs dari KeepTruckin untuk AI Dashcam barunya memberikan platform yang kuat, hemat biaya, dan efisien untuk dibangun. Ekosistem Ambarella memberikan alat yang diperlukan untuk mengembangkan solusi AI yang disesuaikan yang akan bermanfaat bagi pelanggan armadanya.”

Fitur ADAS depan yang diaktifkan oleh CV22 termasuk peringatan untuk mengikuti dari dekat, keberangkatan jalur, tabrakan ke depan, kecepatan dan pelanggaran lalu lintas. Menggunakan SoC yang sama, menjalankan beberapa model jaringan saraf simultan, kemampuan DMS kamera dalam kabin mencakup pemantauan kelelahan pengemudi, gangguan dan pelanggaran kebijakan, seperti penggunaan ponsel kontekstual atau pemantauan sabuk pengaman, yang dikombinasikan dengan data dari kamera depan.

AI Dashcam terhubung ke KeepTruckin Vehicle Gateway, yang mengunggah data, video, dan gambar diam yang telah dianalisis sebelumnya ke perangkat lunak manajemen armada berbasis cloud KeepTruckin secara real-time. SoC CV22 mengintegrasikan prosesor sinyal gambar Ambarella, yang menyediakan video HDR resolusi 1440p berkualitas tinggi di semua kondisi pencahayaan, sambil memanfaatkan enkode H.264/H.265 on-chip untuk mengurangi bandwidth transmisi dan biaya penyimpanan.

KeepTruckin dapat mengunggah fitur tambahan ke CV22 dari waktu ke waktu, melalui pembaruan perangkat lunak over-the-air, untuk memberikan nilai tambahan kepada klien yang berinvestasi di platform. Selain itu, pelatihan model KeepTruckin menjadi semakin tepat karena tim keselamatan internalnya menilai kualitas secara real-time, menambahkan konteks risiko tambahan, dan memberikan masukan yang membuat siklus pelatihan dan pengembangan model menjadi lebih pendek.

Udit Budhia, direktur pemasaran Ambarella, mengatakan, “Untuk aftermarket, ini mungkin produk AI vision paling canggih untuk otomotif. Kami telah melihat pertumbuhan pesat untuk sistem peringatan ADAS, seperti peringatan keberangkatan jalur.” Berbicara tentang keunggulan SoC CV22 dalam aplikasi ini, ia menambahkan, “Komponen utamanya adalah image signal processor (ISP). Kami mendukung berbagai jenis sensor termasuk RGGB, RGB-IR, monokrom, RCCB dan RCCC, dan mendukung pemrosesan HDR. Kami dapat mendeteksi objek dalam pemandangan dan juga memiliki penyaringan cahaya rendah, yang menghasilkan lebih sedikit noise dan karenanya pemrosesan video lebih efisien. Kami menggunakan lebih sedikit bandwidth dan secara signifikan lebih sedikit DRAM.”

Mengenai alat, Budhia berkata, “Alat kami memungkinkan pengembangan kamera depan dan pemantauan pengemudi secara bersamaan.” Kemampuan program dan efisiensi arsitektur CVflow AI Ambarella memungkinkan kinerja visi komputer yang signifikan dengan konsumsi daya yang sangat rendah, yang meningkatkan keandalan dan efisiensi untuk menjalankan lebih banyak model secara paralel yang mengarah ke deteksi dan visibilitas yang lebih besar di sekitar. Kumpulan alat CV lengkapnya membantu pelanggan seperti KeepTruckin mem-porting jaringan saraf mereka sendiri dan mencakup dukungan untuk kerangka kerja pembelajaran mesin standar industri seperti PyTorch, ONNX, Caffe, dan TensorFlow.

>> Artikel ini awalnya diterbitkan di situs saudara kami, EE Waktu.

Konten Terkait:

• Sistem pemantauan pengemudi berbasis visi mendapatkan daya tarik
• Mengurai kesalahpahaman tentang sistem pemantauan pengemudi
• Apakah sistem penomoran otomatisasi kendaraan berguna?
• Sensor gambar menawarkan gambar dalam kabin yang lebih tajam
• Teknologi utama membawa kita lebih dekat ke mobilitas tanpa pengemudi

Untuk lebih banyak Tertanam, berlangganan buletin email mingguan Tertanam.