Общие вопросы / бюро ГИПов / Искусственный интеллект в проектировании - делимся опытом.  (Прочитано 777 раз)

Увидев очередную софтинку для проектирования с использованием ИИ решил создать тему, в которой предлагаю собирать/обсуждать лучший опыт и САПР на основе ИИ.

Просьба: пожалуйста не уводите тему в "скоро ИИ заменит/не заменит специалиста в проектировании". Этот вопрос достаточно объемный на который сегодня ответить невозможно. Наверное когда-то заменит, но полагаю не при нашей жизни... Видите сам начинаю в это сторону мыслить)))

В этой теме обсуждаем, кто какой софт видел а может и пользуется для проектирования с использованием ИИ. В софт разработке уже начали привыкать к ИИ помощникам для генерации кода. А вот как обстоят дела в проектном деле?

К примеру, на днях подбросило мне такую софтинку: Finch 3D — это ИИ-помощник архитектора. Он автоматизирует процесс создания планов этажей и квартирографии. Сервис можно интегрировать с Revit, Rhino и Grasshopper. Не поленитесь - гляньте там видосы)

Также, в готовящемся конкурсе "Проекты года - 2024"(на днях старт) участвует проект в котором посадку зданий и инсоляцию многоэтажек рассчитывали с помощью ИИ белорусские спецы.

А продвинутые коллеги из ЭНЭКИ недавно отрапортовали, что некоторые сети и частично нормоконтроль выполняются в рука об руку с ИИ.

Что можете добавить к этому?

Ссылки по теме:
Искусственный интеллект берет интервью у архитектора.

Че совсем никто и никак?

chatGPT не знает требований национальных норм, как ни пытай его. Наименования подсказывает, но их содержание - нет. Каждый раз надо в диалог подсовывать десятки файлов СН и СП, чтобы посоветоваться с 4o.
    Можно научить ряд моделей распознавать чертежики. Например, YOLO - весьма продвинутая технология компьютерного зрения. Но куда из этого двигаться далее, пока не совсем понятно.
    Пока такой опыт.

Еще один повод сделать нормы все же бесплатными)

Игрался (да и сейчас иногда играюсь) с так называемыми RAG системами - это когда LLM (как ChatGPT) отвечает на основании загруженных данных (как например  ТНПА подгруженные в виде pdf-ок). Есть куча вариантов создания RAG систем... создавать workflow с помощью n8n, longchain итп.... Вопрос только какую LLM использовать. ChatGPT локально не работает... Можо использовать его через API но траблы с VPN + там вроде тарификация тогда чутка другая. LLM-ки которые можно локально установить (Llama например, - тогда возникают ограничения уже по железу машины а младшие модели лламы пока слабоваты).... Есть и другие варианты.... У ChatGPT к примеру можно свою GPT мутить, но там ограничения по количеству подгруженных документов + надо инструкции прописывать. Я сделал себе такую штуку... правда подгрузил содержание + ключевые слова основных ТНПА.... и изначально он говорит какие ему нужны ТНПА, чтобы сгенерировать ответ, В общем если в ступоре - он идею подать может, но в тонкостях не пасёт (ну учить его тоже надо уметь). В приложении ПДФ-ка с процессом общения (пример)

Думаю, что к такому выводу Вы пришли не случайно. Очень наглядный пример это Ваше недавно начатое строительство. Есть опыт - не нужен проект втиснутый в рамки нормативки, достаточно минимального знания математики, рисования и 1-2 человекосилы.

Самый простой костыль, для работы локально, работать через сторонний DNS сервер. Только главное помнить про безгласность этих серверов.
Да и в общем, "скармливать" любым ИИ сервисам корпоративную информацию не все готовы. 

Под локально я имею в виду на машине без доступа в сеть (llama к примеру инсталится локально на машине и работает без доступа к сети).
Про локальность я и говорю в ввиду чувствительной информации, хоть ChatGPT  и утверждает, что он не сохраняет пользовательские запросы и подгруженные данные (в чем кстати я сомневаюсь, т.к. в процессе экспериментов по началу он не знал про СН наши, а через пару дней он с бухты барахты выдал уже на основании СН который я подгружал ранее). Для работы с чувсительной информацией можно делать полностью локальную RAG систему, которая в качестве обработчика (LLM-ки) будет использовать те модели, которые можно установить полностью локально. Например llama 3.1 , но я со своими 32 гигами оперативы (и правда сильно древней 750Ti) смог запустить только версию на 8 млрд параметров (есть еще на 70 и 400). Такая штука будет работать на полностью изолированной от сети машине (сохранность чувствительных данных обеспечена). Но 8 млрд версия - слабовата.... (некоторые модели запускаются только на ОЗУ, более серьезные требуют серьезных ГПУ)
Основная проблема системы - создание датасета (набора данных), их загрузка в векторную базу данных + написание инструкций.
Еще можно поиграться с такими штуками как GPT4ALL, LM Studio, Anything LLM - в принципе на их базе без лонгчейнов можно RAG собрать
А для себя для запуска ChatGPT выбрал самое простое - Опера со встроенным бесплатным VPN - фачит на ура

Вообще это очень интересная штука.... Очень динамично развивающаяся, за год ИИ оченьо сильно эволюционировала, где только время найти, чтобы всем этим заниматься.

Отличная идея! Например есть компания McDermott, они собрали примеры ошибок на чертежах и обучили модель искать эти ошибки и так проверяют чертежи на их наличие. Вот их доклад на одной конференции:
https://youtu.be/Bro992Lz7Gc?t=372

Примеров таких разработок уже достаточно много. Вот то что мне попадалось:
https://hypar.io/
https://architechtures.com/en
https://www.evolvelab.io/post/automating-construction-documentation-with-glyph-co-pilot-your-ultimate-ai-gpt-assistant-in-revit
https://www.planfinder.xyz/
https://www.testfit.io/

Но самая большая подборка у этого парня:
 https://www.aiinaec.com/

     У NVIDIA есть проект Chat with RTX. На Liama. Работает только в W11 и с последними видеокартами, зато локально. Обрабатывает ссылки на ютуб и локальные документы жует. Правда, на русском стесняется отвечать, хоть и прекрасно понимает текстовые и голосовые запросы.
     Для запуска chatgpt без проксей надо свой сервер арендовать (с абонплатой около 5) с ихними адресами, а уж на нем api делать. С доступом, например, через tg-бот. Но это, естественно, требует платы маску (около 0.1-5, зависит от объема запросов и ответов). Затратно, но не привязан к проксям, и всегда под рукой.

Архитекторы осваивают искусственный интеллект

В рамках XXXII Международного архитектурного фестиваля «Зодчество 2024» прошел кейс «ИИ: как архитекторам эффективно использовать новые инструменты на практике».

Екатерина Новикова, архитектор из архитектурно-проектного бюро «Основа», рассказала о способах, которыми искусственный интеллект способен помочь архитекторам в работе.

В первую очередь спикер упомянула о всем известном ChatGPT. По её словам, недавно там стало возможным создать и настроить под себя чат-бот. «Основа» воспользовалась этой возможностью и создала своего чат-бота - «Великий СП». Несложное, но довольно долгое обучение позволило боту отвечать на вопросы, связанные с загруженной в него информацией по ряду СП. «ChatGPT может врать, он склонен выдавать ответ, хотя это неправда, но мы его натренировали, это просто занимает время. Правда, он почему-то не выдает нам, в каком пункте сводов правил это есть. По сути это сокращает нам время поиска. Если вы, допустим, не знаете чего-то - это вам не поможет, но если вы знаете, что конкретно вам надо найти, но вам лениво искать, вы можете спросить у него напрямую», - рассказывает Екатерина.

Для визуализации проектов архитекторы используют также небезызвестный Midjourney. «Мы используем Midjourney для того, чтобы генерировать референсы, какие-то идеи. Вам не надо перерывать Пинтерест, вам не надо перерывать кучу сайтов, вы можете просто делать это с помощью Midjourney», - рассказала Екатерина. С помощью Midjourney «Основа», например, сгенерировала несколько эскизов гостиницы в Киргизии - получилось наглядно и красиво, такие картинки можно показать заказчику, чтобы он понял, подходят они ему или нет.

Особой похвалы от Екатерины удостоилась нейросеть Stable Diffusion, которая, по ее словам, идеально подходит для доработки уже существующих изображений. Если нужно сделать изображение более красивым - небо, бывшее «ужасным», становится закатным, приобретают более естественный вид лица людей на 3D-моделях, - Stable Diffusion - незаменимый вариант. Это инструмент, который хорошо работает с отдельными объектами.

Самым сложным в работе с нейросетями является создание запросов - «Промтов», чему необходимо учиться, но после обучения искусственный интеллект станет незаменимым помощником, который предоставит вам вдохновение или сгенерирует внешний вид зданий на основе вашего схематического изображения, что сокращает время работы в разы. Впрочем, о точных преимуществах по срокам пока говорить рано, заявила Екатерина: тренировка и настройка нейросетей занимает немало времени. «Вот через полгода по тому же чат-боту я отвечу, насколько это быстрее».

Также внимания, по словам специалиста, стоит Adobe Firefly - не так давно появившееся расширение Photoshop, способное свести работу многих часов до минут. По словам Екатерины, это единственная нейросеть, которая способна показать сгенерированное ей же изображение с разных ракурсов, не создавая что-то другое на его основе, как делают другие нейросети.

С развитием технологий многие архитекторы переживают, что нейросети и искусственный интеллект заменят их. Спикер поспешила ответить обеспокоенным: «Архитекторы, которые умеют работать с нейросетями, заменят тех, кто не умеет».

Будущее наступает сейчас, и один из способов шагать в ногу со временем - осваивать технологии искусственной генерации. Конечно, технологии ещё не идеальны, но с каждым обновлением они становятся всё лучше, и при правильном подходе они не только облегчат работу архитекторам и строителям в целом, но и предоставят более широкое поле для фантазии и творческого выражения.

Анна Денисова (www.ancb.ru)

И так коллеги, ваши сообщения еще не читал, прочитаю позже, просто ну очень хочется душу излить, а тут админ прямо к этому призывает. У меня все банально - использовал только ChatGPT. Как то раз коллега скинул фотографию, где рабочие ведут демонтажные работы на фасаде его дома, вторую фотографию он скинул уже готового фасада дома и попросил показать, как будет выглядеть его дом с такой вот новомодной отделкой. Я впервые по совету сокурсника попробовал ChatGPT (далее ИИ). Сначала по запросу ИИ убрал строительные леса, рабочих, мусор строительный, все это было сделано не с первого раза. Потом значит он уработал чистый фасад в нужную текстуру. Тоже далеко не с первого раза, бывали откровенно ну вообще пургу нес этот ИИ. Идеально он так и не сделал. Я выбрал более-менее искомый вариант из кучи хлама и вот его уже в фотошопе доработал до уже на 95% удовлетворительного варианта. Мне на это потребовалось ну минут 40, если без ИИ то даже не знаю сколько это по времени и качество тоже не могу сказать какое бы получилось. Поэтому на тот момент моя оценка работы ИИ была 5+.
Но это все игрушки, это для детей и чисто поиграться, никакой важности от этой работы не было и ответственности за эту работу особо никакой нести не нужно.
Я проектировщик электроснабжения, а также слаботочных сетей и систем. И вот тут я задумался, нужно же попробовать, давай ка с самых простых начнем занятий попроьую поработать с ИИ по серьезному. Взял выполненный раздел АПС для больницы полностью готовый, загружаю туда и даю задание напиши замечания к проекту. Проект был сложноватый, по слаботочке все таки я слабоватый, подумал таким образом заранее к экспертизе подготовиться, заранее отработать замечания. При этом у меня уже были замечания от Рубежа (на базе оборудования Рубеж проект был сделан, админ это не реклама прости. Рубежовцы если вы читаете это, хоть это и не реклама вы все равно тигры, а админ еще раз прости). Короче, туфту всякую он мне прописал, то что уже в проекте выполнено, либо это нужно описать в общих указаниях. Ребята из Рубежа как то поинтересней отругали. Но признаюсь, парочка интересных замечаний, что мол он от меня хочет ИИ-эксперт и как это сделать,  было. Следующим заданием для него было написать к этому же проекту общие указания, причем закинул проект уже с общими указаниями. Ну что могу сказать - кратко описал мои же общие указания и основные показатели. Не впечатлило. Третье задание было - закинул третий раз этот же готовый проект и даю задание: "На основе этого проекта, выполнить раздел АПС для здания, сейчас скину планировку", скидываю пустые планы для этой же больницы. Он столько мне вопросов задавал, откровенного говоря не относящихся к делу, что я думал никакого проекта я не получу. Но он сделал мне раздел АПС, дал ссылку на скачивание, я скачал, открыл и что я там увидел... ПООООООДПИСЫВАЙТЕСЬ НА НАШ ПЛАТНЫЙ ТЕЛЕГРАММ КАНАЛ ПО ССЫЛКЕ В ОПИСАНИИ И ВЫ УЗНАЕТЕ, ЧТО Я ТАМ УВИДЕЛ. ШУЧУ, ШУЧУ админ не блокируй меня дурака, сейчас скажу что там  было и бесплатно. Готовы? А ничего он не сделал, кроме каких то четырех непонятных кружочка в уголках листов он ничего не нарисовал. В общем, по поводу серьезных задач для ИИ ничего сказать не могу, так как никакой серьезной работы он для меня ни разу так и не сделал, как я его не просил. Вот недавно, я дал задание перевести JPEG чертеж в DWG. ну неаккуратно получилось, такое в проект включать, ну нет и чертеж то не сложный нужно было расчертить.
У знакомых тоже есть опыт. Жена брата страшего учителем математики в школе работает, так говорит, что фигню детскую он решает, а вот что нить посерьезнее уже фигню выдает. Сестренка младшая школу заканчивает, тоже самое ей вторит, серьезные задачи ему можно не давать, а детское быстрее самой решить, чем ему задание давать. Она его вообще использует для приколов, чисто поугарать.
Не знаю коллеги какие выводы по этому поводу делать. Вещь прямо говоря очень нужная, но пока еще, как мне видется, сверхсырая

Да, согласен сверх сырая, как минимум для инженерки. В РФ сейчас развивают инициативу, чтобы все застройщики делились лучшими кейсами в проектировании, чтобы на этих данных учить ИИ.

Однако, иногда очень помогает. Например объемы посчитать по описанию конструктива. Но нужно как минимум в двух разных ИИ проверить и сравнить. Я лично верю, что если уж видео научили делать по промтам, то и чертить научат. Вопрос времени. Думаю, автодеск когда-то это поднимет.

ПС: Казахстан довольно активно развивается в цифровизации. Мне кажется(или ошибаюсь?) лучшие из бывшего СССР. На днях даже Павел Дуров к вам заезжал.

Коллеги, кто как не мы инженеры понимаем что под каждый вид работ в строительстве есть свой инструмент.
Да, можно например перфоратором и отверстия под дюбеля делать и сами же дюбеля забивать и когда надо и саморезы повкручивать. А ещё и раствор специальной насадкой подмесить и стенку подштробить и ещё много чего уверен можно делать. Но надо понимать что каждый инструмент под свои задачи.
Недавно замминистра минсвязи меня упрекнул в том что я все обобщаю и называю ИИ.
Точно также не стоит думать что ChatGPT вам одинаково и задачку по математике решит и проект электрики сделает и чертеж из pdf в dwg переведет. Хотя стоит отметить что мировые лидеры ИИ стараются делать универсальные инструменты, но пока этого сложно добиться, в большей степени потому что почти вся информация по узким направлениям закрытая.
И ChatGPT на таких данных никогда не обучался.
Также не стоит забывать и вопрос модальностей.
Не все задачи можно впихнуть в текст.
Те же чертежи dwg.

Так вот, ИИ это обобщенное понятие. Представьте что вы рассказываете своему знакомому не из проектирования о своей работе.
Вы же не начинаете его сразу заваливать терминологией сокращений направлений типа АВТ, ЭОМ, ЭС и т.п. Скорее всего вы мягко говорите Электрики или Проектировщики.
Если копнуть за ИИ, то там такая глубокая сфера и направлений не меньше чем в проектировании.
И в каждом из этих направлений разные задачи, разные модели машинного обучения, которые делают разные задачи.
Сам ChatGPT не работает с картинками, для этого под капотом он вызывает модель диффузии, наверняка вы слышали про Stable Diffusion, только у OpenAI это своя модель.
Для выдачи вам отчёте в word или excel, он тоже под капотом вызывает инструменты. Приятно кстати слышать что и dwg можно делать, я не знал.
Так вот весь посыл к тому, что не стоит думать что ChatGPT закроет все ваши потребности и если он что-то делает плохо, то лучше никто не делает, по крайней мере сейчас.
Просто стоит погуглить другие инструменты ИИ.
Которые были натренированы на конкретной специфической задаче.
Например предсказание погоды, для этого есть свои нейросети, для видео свои.
Да даже уже есть такие, которые CAD модели генерируют (https://www.spectrallabs.ai/research/SGS-1).

И также важно отметить что сейчас эта в активной фазе развития, то что сейчас невозможно, через пол года уже могут научится делать, а также часть разработанных технологий устаревает с выходом новых.
Это не строительная сфера, где все уже более менее устаканилось и все понятно.
Там все кипит и мировые корпорации ещё подливают масла в огонь инвестируя миллиарды долларов и стоя гигантские датацентры.
Стали бы они просто так жечь деньги?! Думаю нет. А то направление, в развитие которого столько вкладывают неизбежно будет развиваться.
И нам очень повезло, что наука пока не даёт успеть корпорациям сделать это все платным сразу и у нас есть бесплатный доступ ко всем самым современным технологиям.
Есть в этом конечно и негативная сторона, что когда они посадят на эту иглу многих, то потом цены за ИИ могут ставить любые. Но на наше счастье среди них есть конкуренция, ну и Китай тоже не даёт им разгуляться)

Касаемо цифровизации у нас, могу дать этому положительную оценку, так как много какие моменты упростились. Насчет лучшие из бывшего СССР сказать мне трудно, насколько я знаю аналогичные работы, со всеми вытекающими производились и до сих пор производятся как в РФ, так и в РБ. Если взять, например, такой момент как взаимодействие граждан с государством, то аналогичные сервисы есть как в Российской Федерации, так и в Республике Беларусь, заточенные под законодательство данных государств, у кого лучше все организовано и работает это спор из разряда в чужом огороде редька всегда слаще. Вот что у меня вызывает интерес, так это создание Министерства Искусственного Интеллекта. Не совсем мне это действие понятно, хотя прямо скажем, и смысл цифровизации я когда то тоже не понимал.
Я вот что еще, касаемо опыта взаимодействия с ИИ не описал, когда я фасад  здания перекрашивал - это как работать с просто мега рукастым и талантливым дизайнером, но в то же время на столько же исключительно, просто умопомрачительно тупым, который ну вообще не соображает. Это для тех, кто думает, что все ИИ вышел, миллионы людей пойдут милостыню просить. Я таких людей расстрою будете и дальше рано вставать, завтракать, все процедуры и тащиться на работу. Просто теперь работать в некоторых профессиях будет проще, сама работа немного изменится. Дизайнеры никуда не денутся, они по прежнему нужны, просто будут быстрее и больше выдавать результатов.
Тут ниже pasha373 написал и часть его текста, как будто бы мне адресована была, хотелось бы выразить согласие и дополнить его кое-какими своими размышлениями. Смотрите Павел, я экспериментировал, смотрел на что эта штука способна и где для себя я могу ее применить. У нас же в интернете везде панику развели, что ИИ сейчас все заменит, вот мне же надо узнать где он меня заменит. То, что ИИ прямо сейчас начнет и задачи по математике решать, и проекты чертить, и картинки рисовать, тексты писать, и все это сразу и качественно - Вы правы, что вот сейчас ждать от одной нейронки всего этого глупо и наивно. Скорее всего будут выходить разные нейронки для разных задач и для нас тоже со временем выпустят. Когда нам говорят, что уйдут многие профессии в прошлое за ненадобностью - когда-то автомобили вышли в массу, кучера стали ненужны за ненадобностью, так водителя понадобились, теперь механики понадобились, причем всякие разные - мотористы, по ходовой, по коробке передач, автоэлектрики понадобились. Тут тоже может так получиться, что кого то и уволят, а кучу специалистов за место них наберут, которые прибыль увеличат за счет большего объема выполненных работ. ИИ штука однозначно полезная в нашей сфере и ее надо развивать.

Сколько денег нужно инвестировать на развитие ИИ в строительстве? Думаю что просто вписать в клеточку ученической тетради нолик, а в соседнюю единичку, это уже стоит денег. И чтобы заменить инженера на ИИ, нужно чтобы ИИ стоил дешевле. И теперь подумайте что в РБ дешевле, стоимость трудовых резервов или электроэнергии на поддержание компьютерной сети в каком-нибудь министерстве?

Насчет инвестиций сказать ничего не могу, это уже не мой профиль и прямо говоря не мой уровень отвечать на такие вопросы. Думаю приписыванием нуликов и единичек в разные клеточки тетради расчет подобного рода дел не ведется. Процитирую Геннадия Георгиевича Макаренкова, вернее его предостережение на один мой вопрос: "Такие вопросы не решаются одним человеком", как то так он мне ответил тогда.  Вот в последнем моем сообщении для pasha373 я имел ввиду немного другое. Даже совершенно другое. Я как раз таки подчеркнул, что замены инженера искусственным интеллектом не произойдет, особенно полной замены не будет. В моем понимании ИИ это инструмент, который ускоряет и упрощает работу. Прибыль от использования ИИ должна быть в теории за счет увеличения выполненного объема работ. На основании чего я сделал такие выводы, там выше я описал максимально подробно свои эксперименты. Могу ошибаться и быть может нужны эксперименты гораздо более масштабные и массовые, по результатам которых можно будет сделать куда более развернутые выводы касаемо применения ИИ на практике. Но вот по большим деньгам и инвестициям это не ко мне, я такими вопросами не занималься и опыта необходимого не имею.

А объёмы работ на рынке будут расти пропорционально росту производительности с применением ИИ? Потому что если нет, то это выльется в сокращение потребности в инженерах, что уже можно будет назвать заменой инженеров на ИИ. Не полной, но для определенного процента специалистов это так дословно и будет.
Пока рано говорить что будет выгоднее. Те кто сейчас инвестирует в это однажды поднимут стоимость данных продуктов с учётом получения прибыли от вложений (разработка, поддержка, инфраструктура). И отталкиваться будут не от себестоимости, а от конкуренции с трудом человека. Поэтому не жду повышения производительности (на рубль затрат) многократного. Особенно у нас, т.к. мы закрываемся от мира и влияние конкуренции на цены не будет существенным. К тому же мы привыкли не тратить деньги на ПО, поэтому для нас это будет чистый плюс в затраты.
И то что будет защита внутреннего рынка ИИ не сомневаюсь. Даже не потому что "враги". Государство не допустит утекание добавленной стоимости мировым корпорациям. Так что у нас будет свой путь как обычно.

Хочу поделится статьей , где проранжированы по разным критериям 58 ИИ решений. https://promcore.io/blog/ai_verefication_raiting/#wbb1

Ну не знаю Юрий, такими вопросами я не задаюсь, для этого есть другие люди, у них голова большая, вот и пусть ей работают, думают, принимают решение что выгодно, а что нет. А у меня вопрос простой - мужики, есть задание для ИИ нужно сделать раздел ЭОМ, АПС, ОС и т.д. Есть примеры подобных работ, пусть посмотрит и сделает также, я проверю и либо дам ему задание на корректировку, либо сам подкорректирую. Чем это сделать? Все, вот и весь мой вопрос

😮1000 рублей МОРАЛЬНОЙ компенсации(не договорная пеня) за строительный брак.
Решением суда Октябрьского района г. Могилева постановлено - взыскать с ответчика в пользу истца 1000 рублей компенсации морального вреда...