Robot Mendeteksi dan Membagikan Perubahan 3D dalam Waktu Nyata

Bahkan perubahan kecil di lingkungan prajurit dapat menunjukkan bahaya. Sekarang, robot dapat mendeteksi perubahan tersebut dan peringatan dapat segera memperingatkan prajurit melalui tampilan di kacamatanya. Para peneliti mendemonstrasikan di lingkungan dunia nyata tim robot manusia pertama di mana robot mendeteksi perubahan fisik dalam 3D dan berbagi informasi itu dengan manusia secara real time melalui augmented reality. Manusia kemudian dapat mengevaluasi informasi yang diterima dan memutuskan tindakan selanjutnya.

Pekerjaan itu dilakukan untuk memberikan kesadaran kontekstual ke platform darat robotik otonom dalam skenario manuver dan mobilitas. Sebagian besar penelitian akademis dalam penggunaan antarmuka realitas campuran untuk tim manusia-robot tidak memasuki lingkungan dunia nyata melainkan menggunakan instrumentasi eksternal di laboratorium untuk mengelola perhitungan yang diperlukan untuk berbagi informasi antara manusia dan robot. Demikian pula, sebagian besar upaya rekayasa untuk menyediakan antarmuka realitas campuran kepada manusia tidak memeriksa kerja sama dengan robot seluler otonom.

Penelitian baru memasangkan robot darat bergerak otonom kecil, yang dilengkapi dengan sensor jarak laser yang dikenal sebagai LiDAR, untuk membangun representasi lingkungan dengan rekan satu tim manusia yang mengenakan kacamata augmented reality. Saat robot berpatroli di lingkungan, ia membandingkan pembacaan saat ini dan sebelumnya untuk mendeteksi perubahan di lingkungan. Perubahan tersebut kemudian langsung ditampilkan di kacamata manusia untuk menentukan apakah manusia dapat menafsirkan perubahan lingkungan.

Dalam mempelajari komunikasi antara robot dan tim manusia, para peneliti menguji sensor LiDAR resolusi berbeda pada robot untuk mengumpulkan pengukuran lingkungan dan mendeteksi perubahan. Ketika perubahan itu dibagikan menggunakan augmented reality kepada manusia, para peneliti menemukan bahwa rekan satu tim manusia dapat menafsirkan perubahan yang bahkan terdeteksi oleh LiDAR dengan resolusi lebih rendah. Hal ini menunjukkan bahwa bergantung pada ukuran perubahan yang diharapkan terjadi, sensor yang lebih ringan, lebih kecil, dan lebih murah dapat bekerja dengan baik dan berjalan lebih cepat dalam prosesnya.

Studi masa depan akan terus mengeksplorasi bagaimana memperkuat kerja sama antara manusia dan agen otonom dengan memungkinkan manusia berinteraksi dengan perubahan yang terdeteksi, yang akan memberikan lebih banyak informasi kepada robot tentang konteks perubahan; misalnya, perubahan yang dibuat oleh musuh versus perubahan lingkungan alami atau positif palsu. Ini akan meningkatkan pemahaman konteks otonom dan kemampuan penalaran platform robot seperti dengan memungkinkan robot untuk belajar dan memprediksi jenis perubahan apa yang merupakan ancaman. Pada gilirannya, memberikan pemahaman tentang otonomi ini akan membantu peneliti mempelajari cara meningkatkan kerja sama tentara dengan platform otonom.