Адамға барынша ұқсас роботтар туралы сөз болғанда, басты ерекшеліктердің бірі — еріндердің айтылып жатқан сөздерге дәл сәйкес қозғала алуы. Жаңа робот бұл қабілетке ғана ие емес, сонымен қатар адам секілді өздігінен сөйлеуді үйрене алады.

EMO роботы қалай жұмыс істейді

EMO роботы Колумбия университетінің аспиранты Юхан Ху, профессор Ходом Липсон және олардың әріптестері тарапынан жасалды. Құрылғы — бетке арналған икемді силикон терісінің астына орналасқан 26 шағын мотордан тұратын бас. Моторлардың түрлі комбинациялары арқылы роботтың беті әртүрлі эмоцияларды көрсете алады, ал еріндері әртүрлі пішінге ене алады.

Оқыту процесі

Зерттеушілер алдымен EMO-ны айна алдына қойды. Робот кездейсоқ түрде мыңдаған түрлі бет қимылдарын жасап, өзін бақылады. Бұл оған моторлардың қай комбинациясы қандай визуалды қозғалыстарға әкелетінін түсінуге мүмкіндік берді. Мұндай тәсіл «көзқарастан әрекетке» (VLA) деп аталатын тілдік модельге негізделген.

Кейін EMO YouTube-та адамдар сөйлеп, ән айтып жатқан көптеген сағаттық видеоларды көрді. Бұл роботқа ауыз қимылдары мен белгілі бір дыбыстар арасындағы байланысты анықтауға көмектесті. Жасанды интеллект жүйесі осы білімді VLA-моделі арқылы үйренгенімен біріктіріп, EMO-ға синтетикалық дауыс модулі арқылы айтылатын сөздермен ерін қозғалысын синхрондауға мүмкіндік берді.

Қазіргі мүмкіндіктері мен болашағы

Қазіргі таңда бұл технология әлі жетілмеген: EMO кейбір дыбыстарды, мысалы, «Б» және «В» әріптерін айтуда қиындықтарға тап болады. Дегенмен, тәжірибе мен дағдылар жинақталған сайын, оның адамдармен табиғи әңгіме жүргізу қабілеті жақсара түседі.

Юхан Ху былай дейді: «Ерін қозғалысын синхрондау қабілеті ChatGPT немесе Gemini секілді сөйлесу жасанды интеллектімен үйлескенде, робот пен адам арасындағы байланысты мүлде жаңа деңгейге көтереді. Робот адам әңгімелерін көбірек бақылай берген сайын, ол мимикалық нәзік қимылдарды да жақсырақ қайталай алады, бұл бізге эмоциялық тұрғыда әсер етеді. Әңгіме контексті неғұрлым ұзақ болса, бұл қимылдар да соғұрлым контекстке бейімделеді».

Ғылыми жарияланым

Бұл зерттеудің нәтижелері жуырда Science Robotics журналында жарияланды.