Kamera berkemampuan AI mendorong uji coba kota pintar
Uji coba kota pintar bertenaga AI di Roma, menggunakan gambar Sony sensor dengan kemampuan AI sebagai bagian dari sistem "Smart Tip", dimaksudkan untuk membantu mengurangi kemacetan dan polusi dari lalu lintas, mengurangi kecelakaan pejalan kaki di jalan dan meminimalkan kepadatan di bus kota.
Uji coba kota pintar bertenaga AI di Roma, menggunakan sensor gambar Sony dengan kemampuan AI sebagai bagian dari sistem "Smart Tip", dimaksudkan untuk membantu mengurangi kemacetan dan polusi dari lalu lintas, mengurangi kecelakaan pejalan kaki di jalan, dan meminimalkan kepadatan di bus kota.
Uji coba ini dimaksudkan untuk mengatasi tiga "titik sakit" yang umum terjadi di sebagian besar kota:volume lalu lintas dan kemacetan, terutama yang terkait dengan mencari tempat parkir; keselamatan pejalan kaki saat menyeberang jalan; dan mengoptimalkan ketersediaan transportasi umum untuk era pandemi dan seterusnya.
Sejauh ini, tiga sistem Tip Cerdas proof-of-concept telah diterapkan di Kota Abadi, di atas lampu lalu lintas.
Sistem Smart Tip, yang menampilkan dua modul kamera berkemampuan AI Sony IMX500, berada di atas lampu lalu lintas (Sumber:Sony Semiconductor Europe)
Smart Tips masing-masing memiliki dua sensor gambar Sony IMX500. Sensor ini, diluncurkan setahun yang lalu, terutama menampilkan kemampuan pemrosesan AI yang memungkinkan gambar diproses di tepi jaringan, tanpa gambar keluar dari Smart Tip.
Modul IMX500 memiliki sensor 12,3 megapiksel di samping chip logika yang menampilkan desain Sony DSP yang didedikasikan untuk pemrosesan AI, ditambah memori untuk menyimpan model AI. Kemampuan untuk memproses gambar di dalam perangkat (tanpa mengirim data ke cloud) sangat penting untuk pengoperasian sistem AI kota pintar karena memungkinkan latensi yang sangat cepat. Ini juga memastikan privasi konsumen; gambar tidak meninggalkan perangkat, sebaliknya, informasi diekstraksi melalui AI dan dikonversi ke metadata. Metadata ini mungkin mencakup jumlah orang yang naik atau turun bus di halte bus, atau keberadaan pejalan kaki yang menyeberang jalan. (IMX500 memiliki kemampuan untuk menampilkan seluruh gambar atau wilayah yang diinginkan/gambar sebagian jika diperlukan, tetapi hanya metadata komunikasi yang dipilih untuk uji coba ini).
“Tidak ada gambar yang keluar dari sensor ini, ini bukan kamera, ini adalah kamera yang digunakan sebagai sensor – tidak ada gambar yang keluar,” kata Antonio Avitabile, direktur pelaksana aliansi perusahaan dan investasi di Sony. “Yang keluar hanya “ya, kendaraan” atau “tidak ada kendaraan” atau sejumlah orang. Idenya di sini adalah untuk memenuhi tujuan, dan melakukan pekerjaan, tetapi tanpa memperhatikan orang.”
Memproses gambar di tepi juga menghindari keharusan mengunggah sejumlah gambar 12 megapiksel ke cloud; metadata saja jauh lebih cocok untuk transmisi oleh modem seluler Smart Tip.
klik untuk gambar ukuran penuh Tiga aplikasi sedang diuji coba oleh proyek ini (Sumber:Sony Semiconductor Europe)
Tiga aplikasi
“Kemacetan lalu lintas adalah masalah yang sangat besar di kota-kota besar,” kata Avitabile. “Porsi yang signifikan berkorelasi dengan pengemudi yang mencari tempat parkir yang tersedia.”
Sistem AI kota pintar Roma bertujuan untuk melacak di mana ada ruang parkir yang tersedia secara real-time. Lokasi GPS dari ruang yang tersedia dikirim ke cloud melalui modem seluler sistem. Lokasi kemudian dapat dikomunikasikan kepada pengemudi melalui aplikasi ponsel. Idenya adalah untuk menghindari pengemudi harus berkeliling untuk waktu yang lama mencari ruang, mengurangi kemacetan dan polusi pada saat yang sama.
Keamanan pejalan kaki adalah salah satu poin nyeri utama untuk kota mana pun; ribuan pejalan kaki tewas di jalan-jalan Eropa setiap tahun. Jarak rata-rata antara pejalan kaki dan kendaraan adalah metrik utama yang digunakan untuk mengukur keselamatan pejalan kaki. Uji coba ini bertujuan untuk memberikan analisis kuantitatif tentang hal ini. Tips Cerdas akan mendeteksi pejalan kaki yang menyeberang jalan, lalu mengaktifkan sinyal visual atau suara untuk kendaraan saat pejalan kaki menyeberang.
Lalu lintas di luar Colosseum Roma (Sumber:Boris Stroujko)
“Setiap kali pejalan kaki diidentifikasi menyeberang jalan, kami memiliki semacam sinyal penerangan di persimpangan yang akan mengingatkan pengemudi bahwa seseorang benar-benar menyeberang,” kata Avitabile. “Kami yakin hal itu akan menjadi penghalang untuk menghasilkan lebih sedikit cedera dan kematian di penyeberangan pejalan kaki.”
Transportasi umum adalah aplikasi ketiga yang akan ditangani oleh uji coba. Contoh Avitabile, halte bus pintar, akan dapat memeriksa berapa banyak orang yang menunggu di setiap halte dan menggunakan informasi ini untuk mengontrol jumlah orang di setiap bus (terutama penting selama pandemi yang sedang berlangsung). Bus juga bisa menghindari berhenti di halte di mana tidak ada penumpang yang menunggu. Sistem juga dapat memantau berapa banyak orang yang naik dan turun bus di setiap halte. Informasi ini dapat digunakan untuk mengoptimalkan rute dan waktu bus dengan lebih baik.
Sistem backend
Sistem Tip Cerdas Sony menyertakan platform layanan yang berjalan di cloud. Platform ini akan menangani penyediaan dan pendaftaran perangkat Tip Cerdas. Platform ini juga menangani pelatihan model AI yang akan digunakan untuk mendeteksi mobil dan orang, serta produksi model yang dapat dipasang di perangkat IMX500.
Skalabilitas sistem dipastikan dengan meminimalkan kebutuhan bandwidth mereka (dengan hanya mengirimkan metadata seperti dijelaskan di atas). Tips Cerdas sendiri identik di ketiga kasus penggunaan; hanya software model AI pada masing-masing yang berbeda. Model AI dapat diunggah atau diperbarui melalui udara untuk meningkatkan kemanjuran atau mengakomodasi berbagai aplikasi di masa mendatang.
>> Artikel ini awalnya diterbitkan di situs saudara kami, EE Kali Eropa.
