Baru -baru ini, Microsoft secara resmi membuka model Basic Agent AI multimodal yang disebut "Magma" di situs web resminya. Kecerdasan buatan baru ini memiliki kemampuan untuk menjangkau dunia digital dan fisik, dan dapat memproses banyak tipe data seperti gambar, video, teks, dll. Pada saat yang sama. Dibandingkan dengan asisten AI tradisional, Magma unik dalam fungsi prediksi psikologisnya, memungkinkannya untuk lebih memahami niat dan perilaku karakter atau objek di masa depan dalam video.
Magma memiliki berbagai skenario aplikasi, dan pengguna dapat menggunakan AI ini untuk secara otomatis melakukan pemesanan dan memeriksa cuaca dan operasi harian lainnya. Selain itu, secara otomatis dapat mengontrol robot fisik dan memberikan bantuan waktu nyata kepada pengguna selama kegiatan seperti catur. Kemampuan multimodal ini memungkinkan magma untuk bekerja dengan baik di lingkungan yang berbeda dan dapat beradaptasi dengan berbagai tugas yang kompleks.
Menurut laporan resmi, Magma sangat cocok untuk asisten atau robot bertenaga AI, membantu mereka lebih memahami lingkungan mereka dan mengambil tindakan yang sesuai. Misalnya, ini dapat memandu robot rumah untuk mempelajari cara mengatur item yang belum pernah Anda lihat sebelumnya, atau membantu asisten virtual menghasilkan panduan langkah demi langkah untuk pengguna. Fitur ini sangat meningkatkan kemampuan dan kepraktisan belajar robot.
Model magma adalah salah satu seri VLA (Visual Language Action). Dengan mempelajari sejumlah besar data visual dan linguistik publik, ia dapat mengintegrasikan bahasa, ruang dan kecerdasan waktu, sehingga secara efektif menanggapi tugas dan tantangan kompleks dalam kehidupan nyata. Dengan pengembangan teknologi kecerdasan buatan, peluncuran Magma menandai langkah besar lainnya untuk asisten pintar dan robotika.
Tautan Proyek: https://microsoft.github.io/magma/
Poin -Poin Kunci:
Kemampuan Cross-Modal: Magma dapat memproses berbagai jenis data seperti gambar, video, dan teks, meningkatkan fungsi asisten pintar.
Aplikasi Cerdas: Pengguna dapat secara otomatis melakukan pemesanan, memeriksa cuaca, dan mengontrol robot fisik melalui magma.
Pembelajaran Adaptasi: Magma membantu robot mempelajari tugas -tugas baru dan menghasilkan panduan operasional untuk asisten virtual, meningkatkan kegunaannya.