Ketika kita mendengar kecerdasan buatan dan pembelajaran mesin, kita membayangkan sebuah komputer yang dapat berpikir dan belajar untuk dirinya sendiri. Artinya, praktis sebagai manusia.
Kita melihat dunia melalui kombinasi beberapa indera, seperti penglihatan, pendengaran, dan pengenalan ucapan. Tetapi mesin menafsirkan dunia dengan bantuan data yang diproses oleh algoritma. Artinya, ketika mesin melihat foto, itu menerjemahkannya ke dalam satu set metadata yang digunakan untuk melakukan tugas. Dan jika Anda memperumit tugas, yaitu di mana akan ada suara selain gambar, maka AI mulai hilang.
“Masalah utama di sini adalah bagaimana sebuah mesin dapat mendamaikan modalitas yang berbeda ini? Sangat mudah bagi kita orang. Kita melihat sebuah mobil, dan kemudian kita mendengar suara mobil lewat, dan kita tahu itu adalah hal yang sama. Tetapi untuk pembelajaran mesin, semuanya tidak sesederhana itu", — kata Oleksandr Liu, seorang mahasiswa pascasarjana di Computer Science and Artificial Intelligence Laboratory (CSAIL) dan penulis pertama makalah yang ditujukan untuk masalah ini.
Liu dan rekan-rekannya mengembangkan metode kecerdasan buatan yang belajar untuk merepresentasikan data dengan cara menangkap konsep yang umum untuk modalitas visual dan audio. Misalnya, metode mereka dapat mempelajari bahwa tindakan anak menangis dalam video terkait dengan kata "menangis" dalam klip audio. Dengan menggunakan pengetahuan ini, model pembelajaran mesin mereka dapat menentukan di mana tindakan tertentu terjadi dalam video dan menemukannya.
Metode ini suatu hari nanti dapat digunakan untuk membantu robot mempelajari konsep-konsep di dunia melalui persepsi, lebih seperti yang dilakukan manusia. Model ini masih memiliki beberapa keterbatasan yang diharapkan dapat diatasi oleh para ilmuwan dalam pekerjaan di masa depan. Selama ini penelitian mereka terfokus pada data dari dua modalitas dalam waktu yang bersamaan, namun di dunia nyata, manusia secara bersamaan dihadapkan pada banyak aliran data yang mereka olah tanpa berpikir. Mesin belum mempelajari ini.
Anda dapat membantu Ukraina melawan penjajah Rusia. Cara terbaik untuk melakukannya adalah dengan menyumbangkan dana ke Angkatan Bersenjata Ukraina melalui selamatkan hidup atau melalui halaman resmi NBU.
Baca juga: