Современные нейросети умеют превращать несколько слов в готовый 3D-объект. Но за таким результатом часто скрывается непонятный процесс: пользователь получает вещь, но не понимает, как она сделана. Исследователи из Сиднейского университета вместе с коллегами из Кембриджского университета и Сингапурского университета менеджмента разработали инструмент Treellis, который делает совместную работу с ИИ более прозрачной и обучающей.

Программа работает не так, как обычные генераторы по текстовому запросу. Вместо того чтобы сразу выдать финальный дизайн, Treellis предлагает пошагово собирать объект - вручную или с помощью ИИ. Интерфейс показывает отдельные части модели и их расположение в пространстве. Человек может выбрать конкретный элемент, изменить его размер или положение и сразу увидеть результат. При этом разрешено ошибаться и отменять действия - исследователи считают это важной частью обучения.

"Treellis не просто делает что-то за вас. Он показывает, как это сделано", - приводит слова ведущего автора работы, докторанта Исян Чена, пресс-служба университета.

Инструмент распространяется как открытое программное обеспечение: любой человек с браузером может им воспользоваться, а разработчики могут встроить его в любую платформу ИИ через программный интерфейс, или API, - набор правил, по которым программы общаются друг с другом.

Чтобы проверить, помогает ли Treellis учиться, команда под руководством доктора Ануши Витаны провела испытание с участием двух групп. Все участники должны были создать три 3D-объекта возрастающей сложности: чашку, стол и компьютерный монитор - с заданными требованиями. Одна группа работала с обычным инструментом на основе текстовых запросов, другая - с Treellis.

Наблюдения показали: те, кто пользовался Treellis, активно исследовали, как собирается модель, и пробовали небольшие обратимые изменения, чтобы приблизиться к нужному результату. Это помогало им интуитивно осваивать сложные понятия 3D-дизайна. Участники из группы с обычным генератором часто не понимали, как устроен объект, а попытки поправить одну часть модели создавали проблемы в другом месте.

По словам Витаны, инструмент помогает преодолеть две типичные трудности при работе с ИИ: сложность понять, как система устроена, и неумение выполнить нужную задачу с её помощью. Интерактивность, считает он, сокращает оба разрыва и не позволяет полностью переложить работу на алгоритм.

Работа была представлена на симпозиуме по программному обеспечению и технологиям пользовательских интерфейсов (UIST 26) Ассоциации вычислительной техники в Мичигане и получила награду за лучшую статью. Как отметила председатель комитета премии профессор Энн Рудо из Бристольского университета, награда отмечает оригинальность, научную строгость и потенциал долгосрочного влияния на область.

В дальнейшем авторы надеются применить открытый интерфейс в клинической практике. Например, врачи могли бы с его помощью индивидуально проектировать ортезы для стопы и голени детям с церебральным параличом, шины для запястья пациентам с артритом или эргономичные рукоятки для реабилитационного оборудования. Пока речь идёт о лабораторной разработке и планах, а не о готовом коммерческом продукте.

"Treellis ломает схему, при которой ИИ остаётся чёрным ящиком. На примере 3D-дизайна он позволяет пользователям понимать внутреннее устройство результата, взаимодействовать с ним и менять его", - подытожил Витана.

Источник: Tech Xplore