В МТИ создали роботизированную систему сборки физических объектов из готовых блоков, которая понимает запросы на естественном языке. Исследователи задались задачей упростить первичное проектирование и быстрое прототипирование для тех, кто не имеет глубоких навыков работы с системами САПР.

Вначале модель генеративного ИИ создает трехмерный образ, руководствуясь пользовательским описанием. Затем вторая модель анализирует назначение и геометрию предмета, принимая решение о местах размещения блоков. После этого робот выполняет сборку. В экспериментах использовались блоки двух видов — структурные части и панели, из которых изготавливали стулья, полки и другие предметы домашней обстановки.

Важной особенностью системы является возможность доработки конструкции — после сборки пользователь может отдать дополнительные указания, например, о размещении панелей на сиденье стула.

Роботизированная система сборки
Источник: MIT

Авторы провели опрос потенциальных пользователей системы, отметив, что 90% из них отдали предпочтение предметам, которые собирал робот по запросу к модели ИИ, а не тем, которые изготавливались другими автоматизированными методами.