Robotlar, Microsoft sayesinde ChatGPT’nin gerçek dünyaya dokunmasını sağlıyor

Geçen hafta, Microsoft araştırmacıları ilan edildi dil yeteneklerini kullanarak robotları ve dronları kontrol etmek için deneysel bir çerçeve ChatGPT, OpenAI tarafından oluşturulan popüler bir AI dil modeli. ChatGPT, doğal dil komutlarını kullanarak robot hareketlerini kontrol eden özel kodlar yazabilir. Bir insan daha sonra sonuçları görüntüler ve görev başarıyla tamamlanana kadar gerektiği gibi ayarlar.

Araştırma” başlıklı bir makaleye ulaştı.Robotik için ChatGPT: Tasarım İlkeleri ve Model YetenekleriMicrosoft Otonom Sistemler ve Robotik Grubu’ndan Sai Vemprala, Rogerio Bonatti, Arthur Bucker ve Ashish Kapoor tarafından yazılmıştır.

İçinde tanıtım videosuMicrosoft, görünüşe göre ChatGPT tarafından yazılan ve insan talimatlarını izleyen kod tarafından kontrol edilen robotları gösteriyor; blokları bir Microsoft logosuna yerleştirmek için bir robot kolu kullanıyor, bir rafın içeriğini incelemek için bir insansız hava aracı uçuruyor veya görme yetenekleri olan bir robot kullanarak nesneleri buluyor.

Araştırmacılar, ChatGPT’nin robotik ile arayüz oluşturmasını sağlamak için ChatGPT’ye özel bir robotik API öğretti. “Topu al” gibi talimatlar verildiğinde, ChatGPT tıpkı bir şiir yazar veya bir makaleyi tamamlar gibi robotik kontrol kodu üretebilir. Bir insan, kodu doğruluk ve güvenlik açısından inceleyip düzenledikten sonra, insan operatör görevi yürütebilir ve performansını değerlendirebilir.

Bu şekilde, ChatGPT robotik kontrol programlamasını hızlandırır, ancak otonom bir sistem değildir. Makalede “ChatGPT’nin robotik için kullanımının tam otomatik bir süreç olmadığını vurguluyoruz”, “daha ziyade insan kapasitesini artırmaya yönelik bir araç görevi görüyor.”

ChatGPT’ye yapılan geri bildirimlerin çoğu (eylemlerinin başarısı veya başarısızlığı açısından) metin biçiminde insanlardan geliyor gibi görünse de, araştırmacılar ayrıca ChatGPT’nin kendisine görsel veri beslemede bazı başarılar elde ettiklerini iddia ediyorlar. Bir örnekte, araştırmacılar ChatGPT’ye bir robota kameradan gelen geri bildirimle bir basketbol topunu yakalaması için komut verme görevi verdi: “ChatGPT, kamera görüntüsündeki topun ve gökyüzünün görünümünü aşağıdakileri kullanarak tahmin edebilir: SVG kodu. Bu davranış, LLM’nin metin tabanlı olasılıkların ötesine geçen örtük bir dünya modelini takip etme olasılığına işaret ediyor.”

Sonuçlar şimdilik ilkel görünse de, en yeni tech du jour’u (geniş dil modelleri) robotik kontrole uygulamaya yönelik ilk girişimleri temsil ediyor. Microsoft’a göre, bir ChatGPT arayüzü gelecekte robotları çok daha geniş bir kitleye açabilir.

Bir Microsoft Research, “Bu araştırmadaki amacımız, ChatGPT’nin metnin ötesinde düşünüp düşünemeyeceğini ve robotik görevlerde yardımcı olmak için fiziksel dünya hakkında akıl yürütüp düşünemeyeceğini görmektir” diyor. Blog yazısı. “Karmaşık programlama dillerini veya robotik sistemlerle ilgili ayrıntıları öğrenmeye ihtiyaç duymadan insanların robotlarla daha kolay etkileşim kurmasına yardımcı olmak istiyoruz.”