Sandflow выложила 106 тысяч 3D-моделей с кодом на Python: объект правится сменой цифры

Датасет (набор данных, на котором обучают нейросети) обычно состоит из готовых файлов, которые можно только скачать и открыть. В Sand3D к каждой модели приложен код на Python (популярный язык программирования), который строит объект из отдельных деталей. По описанию разработчиков Sandflow, датасет нужен для обучения моделей созданию и редактированию трёхмерных объектов.

Что нового в Sand3D?

• Модель как код. В коде перечислены детали объекта, их размеры, формы, расположение и материалы. У каждой детали есть своё имя и функция.
• Параметры можно менять. У стула можно поднять ножки или расширить спинку, перезапустить код и получить новый стул.
• Подвижные механизмы. Больше 10 тысяч моделей оснащены движущимися частями.
• Работа через Blender. Библиотека опирается на Python API Blender, программы для 3D-моделирования. API здесь означает набор команд, которыми одна программа управляет другой. Через него задают общие команды для геометрии, скруглений, отверстий и подвижных соединений.
• Связка с языковыми моделями. Описание API добавляют в системный промпт (постоянную инструкцию, которую нейросеть получает до вашего запроса). Описание занимает около 3,6 тысячи токенов. Токен означает кусочек слова, которым модель измеряет длину текста.
• Много источников. Модели собраны из Objaverse, CAD-моделей (чертежей из инженерных программ), Articraft, AutoMate и Nvidia SimReady.
• Экспорт в разные форматы. GLB подходит для сайтов и игровых движков, OpenUSD для 3D-сцен, URDF для симуляторов роботов. Есть также OBJ и STL, распространённые форматы обмена 3D-файлами.

Вместе с кодом выложили изображения моделей и готовые файлы OpenUSD. Значит, посмотреть объект можно и без запуска кода.

Как попробовать Sand3D?

1. Найдите датасет Sand3D на Hugging Face, крупнейшей площадке для обмена нейросетями и данными. Там же 3d модели скачать можно целиком или выборочно.
2. Откройте сайт проекта Sandflow и просмотрите коллекцию объектов вместе с кодом, чтобы выбрать подходящий.
3. Запустите код модели через Blender, измените один параметр (например, высоту ножек) и перезапустите.
4. Для работы через нейросеть вставьте описание API в системный промпт и попросите модель собрать объект по вашему описанию.

Есть ли российский аналог?

Российского аналога такого датасета источник не называет. Из доступных в РФ языковых моделей для второго сценария можно попробовать YandexGPT и GigaChat: им тоже можно передать описание API в инструкции.

Насколько уверенно они пишут код для Blender, Sandflow не проверяла. Поэтому сначала проверьте результат на простом объекте.

Что с этим делать прямо сейчас, по ролям?

Автору Дзена. Если вы пишете про интерьер, мебель или технику, готовые 3D модели из коллекции подойдут для иллюстраций и схем. Лицензия CC BY 4.0 требует указывать авторство, поэтому ставьте подпись под картинкой.

Маркетологу. Объект с параметрами экономит время на вариантах: один стул можно показать в нескольких размерах, не заказывая новую модель у дизайнера. Формат GLB подходит для размещения 3D на сайте.

Предпринимателю в РФ и СНГ. Об ограничениях по странам источник не сообщает. Проверьте, открывается ли у вас Hugging Face. Код библиотеки распространяется по лицензии Apache 2.0, её разрешают использовать и в коммерческих проектах.

Что чаще всего спрашивают про Sand3D?

Можно ли использовать модели в коммерческих материалах?

Данные выложены по лицензии CC BY 4.0, код по Apache 2.0. Обе лицензии открытые, но CC BY 4.0 требует указывать авторство. Сохраните ссылку на Sandflow рядом с каждым использованным объектом.

Нужно ли дообучать нейросеть, чтобы она работала с Sand3D?

Не обязательно. Разработчики описывают два пути: дообучение (обучение модели на ваших примерах под узкую задачу) на самом датасете или подключение готовой языковой модели через системный промпт. Для пробы хватит второго пути.

Подойдут ли модели для 3D-печати?

Библиотека умеет экспортировать модели в STL. Печатать ли их, зависит от вашего принтера и самой модели, проверок на печать источник не описывает. Скачайте один простой объект, напечатайте и только потом берите партию.