){kind=link}
Peneliti Apple telah mengembangkan sistem kecerdasan buatan yang disebut ReALM (Resolusi Referensi sebagai Pemodelan Bahasa), yang bertujuan untuk secara radikal meningkatkan cara asisten suara memahami dan merespons perintah.
Dalam sebuah makalah penelitian Apple menjelaskan kerangka kerja baru tentang bagaimana model bahasa besar mengatasi masalah resolusi referensi, yang mencakup penguraian referensi ambigu ke objek di layar, serta memahami konteks percakapan dan latar belakang. Hasilnya, ReALM dapat menghasilkan interaksi yang lebih intuitif dan alami dengan perangkat.
Pengenalan referensi adalah bagian penting dalam memahami bahasa alami, memungkinkan pengguna menggunakan kata ganti dan referensi tidak langsung lainnya dalam percakapan tanpa kebingungan. Bagi asisten digital, kemampuan ini secara historis merupakan tantangan yang signifikan, dibatasi oleh kebutuhan untuk menafsirkan berbagai sinyal verbal dan informasi visual. Sistem ReALM dari Apple bertujuan untuk memecahkan masalah ini dengan mengubah proses pengenalan referensi yang kompleks menjadi tugas pemodelan bahasa murni. Dengan cara ini, dia dapat memahami referensi elemen visual yang ditampilkan di layar dan mengintegrasikan pemahaman tersebut ke dalam alur percakapan.
ReALM merekonstruksi struktur visual layar menggunakan representasi teks. Ini termasuk mengurai objek layar dan mengaturnya untuk membuat format teks yang mencerminkan konten dan struktur layar. Peneliti Apple menemukan bahwa strategi ini, dikombinasikan dengan penyetelan khusus model bahasa untuk masalah resolusi benchmark, secara signifikan mengungguli metode tradisional, termasuk kemampuan GPT-4 OpenAI.
ReALM memungkinkan pengguna berinteraksi lebih efektif dengan asisten digital berdasarkan apa yang sedang ditampilkan di layar, tanpa memerlukan instruksi yang tepat dan terperinci. Hal ini dapat membuat asisten suara jauh lebih berguna dalam berbagai situasi, seperti membantu pengemudi menavigasi sistem infotainmen saat mengemudi atau membantu pengguna penyandang disabilitas dengan menyediakan sarana interaksi tidak langsung yang lebih mudah dan akurat.
Apple telah menerbitkan beberapa makalah penelitian di bidang AI. Bulan lalu, perusahaan tersebut meluncurkan metode baru untuk mempelajari model bahasa besar yang mengintegrasikan informasi tekstual dan visual dengan mulus. Diharapkan demikian Apple akan memperkenalkan sejumlah fitur AI pada konferensi WWDC pada bulan Juni.
Baca juga: