forumСоздать тему

Использование ChatGPT на проектах Red Team — применяют ли его подрядчики и какие тут риски?

SSerkan A***Участник
Должность
Технический директор
Отрасль
Косметика
Тип организации
среднее предприятие
Дата регистрации
янв. 2022 г.
Сообщение
13
#1

Планируем масштабный пентест и моделирование атак Red Team для нашей e-commerce платформы и внутренних систем ERP. Запросили КП у двух консалтинговых компаний по кибербезопасности разброс бюджетов от 90.000 TL до 160.000 TL. На одном из технических созвонов подрядчик открыто заявил что использует ChatGPT и другие генеративные сетки для генерации сценариев социальной инженерии и вариаций эксплойтов, чем меня изрядно смутил.

Я понимаю, что ИИ сейчас используют и в нападении и в защите, но насколько это вообще стандартная и этичная практика в рамках профессионального Red Team? А главное: нет ли риска, что наши внутренние конфигурации куски исходного кода или персональные данные сотрудников утекут в публичные модели?

Применение внешнего ИИ в таких тестах — это норма по рынку или попытка срезать углы с риском утечки данных и отчетами для галочки? Как корректно прописать ограничения в договоре?

NNazlı T***Новый участник
Должность
Бухгалтер
Отрасль
Морепродукты
Тип организации
Производственная компания из 40 человек
Дата регистрации
май 2026 г.
Сообщение
32
Самый полезный#2

Если коротко: использование ИИ пентестерами для составления фишинговых писем или шлифовки типовых скриптов — сейчас обычное дело. Но загрузка конфиденциальных данных компании, IP-адресов или проприетарного исходного кода в публичные облачные модели — это грубейшее нарушение безопасности и конфиденциальности.

ИИ-инструменты сейчас закрывают две задачи: 1) Генерация убедительных, персонализированных фишинговых писем с идеальной грамматикой под социнженерию, 2) Ускорение рутинного скриптинга и автоматизация поиска известных уязвимостей. Главная угроза здесь — если консультант скормит публичной нейросети критичные логи вашей инфраструктуры, сетевую топологию или закрытый исходный код. Эта информация может уйти на дообучение модели или осесть на внешних серверах, спровоцировав утечку.

Все границы нужно жестко фиксировать на этапе договора. В соглашение о конфиденциальности (NDA) внесите формулировку: «Запрещается загружать любые выходные данные систем, исходный код или корпоративную информацию Заказчика в публичные ИИ-сервисы». Если подрядчик использует аналитику на базе ИИ, требуйте, чтобы это были полностью изолированные open-source модели, развернутые на их локальных серверах без выхода в интернет.

GGamze K***Участник
Должность
Тестировщик
Отрасль
Типография
Тип организации
индивидуальный предприниматель
Дата регистрации
янв. 2025 г.
Сообщение
178
#3

Из-за фильтров безопасности публичные модели не напишут готовый 0-day эксплойт. Специалисты обычно используют их для обфускации известного кода, чтобы обходить системы детекта. Однако скармливать код компании облачным сервисам, кроме как локальным изолированным моделям, — это недопустимая уязвимость.

YYasemin K***Участник
Должность
Член правления
Отрасль
Ювелирные изделия
Тип организации
кооператив
Дата регистрации
февр. 2023 г.
Сообщение
66
#4

В прошлом месяце заказывали пентест за 120.000 TL, так по мониторингу трафика поймали безопасника на том, что он сливал логи ошибок нашей внутренней сети в публичный ИИ-сервис. Тестирование свернули в ту же минуту, контракт расторгли. Мониторить исходящий трафик аудиторов, увы, приходится самим заказчикам.

İİlknur G***ВетеранУчастник сообщества
Дата регистрации
нояб. 2024 г.
Сообщение
80
#5

За честность контору можно похвалить, но выкатывать ценник в 160.000 TL и скармливать львиную долю работы боту по готовым промптам — это перебор. Вся суть Red Team строится на нестандартном человеческом мышлении, а шаблоны умеют гонять и обычные автосканеры.

OOya I***Участник
Должность
Член совета директоров
Отрасль
Косметика
Тип организации
Производственная компания из 40 человек
Дата регистрации
авг. 2023 г.
Сообщение
225
#6

Удобный бизнес: скормил целевую компанию нейронке, а потом выставил счет за консалтинг по Red Team. Когда пришлют отчет, вчитывайтесь в формулировки — часто там тупо скопипащенные стандартные ответы бота.

KKemal G***УчастникУчастник сообщества
Дата регистрации
нояб. 2025 г.
Сообщение
5
#7

если крутят локальные сетки на своих серверах без досутпа в сеть то ноль вопросов но если сливают инфу во внешнее облако то о какой конфиденциальности речь. прописывайте в договоре конские штрафы за такое.

GGürkanУчастник
Должность
Энергетика
Тип организации
бутиковое агентство
Дата регистрации
нояб. 2023 г.
Сообщение
94
#8

В соответствии с Законом о защите персональных данных и стандартами информационной безопасности, передача данных сотрудников или клиентов, полученных в ходе тестирования, на платформы искусственного интеллекта, размещённые на зарубежных серверах, является явным нарушением законодательства. Это может создать для вашей компании риск административного штрафа.

SSultan K***Участник
Должность
Логистическое планирование
Отрасль
Оптовая торговля продуктами питания
Тип организации
стартап на ранней стадии
Дата регистрации
дек. 2025 г.
Сообщение
105
#9

Ваше беспокойство абсолютно оправдано. Обязательно запросите у компаний, предлагающих услуги, документ с методологией тестирования. Потребуйте, чтобы они письменно обязались указать какие инструменты, на каком этапе и с какими мерами защиты данных они используют. Профессиональная компания не побоится это задокументировать.

IIrmak B***Эксперт
Должность
Финансовый директор
Отрасль
Логистика
Тип организации
компания в составе холдинга
Дата регистрации
июль 2023 г.
Сообщение
150
#10

По теме red team chatgpt так категорично говорить сложно. Забытые тестовые среды становятся входом в систему чаще, чем продакшн.

Процесс, по которому не ведется учет, не улучшается, потому что вы не знаете что именно улучшать. Проверено опытом.

ZZübeyde K***Участник
Должность
Руководитель отдела закупок
Отрасль
Спорт и фитнес
Тип организации
семейный бизнес
Дата регистрации
февр. 2025 г.
Сообщение
165

Doki · Корпоративный сайт · 2026

#11

у нас так же.

HHüseyin K***УчастникУчастник сообщества
Дата регистрации
янв. 2024 г.
Сообщение
368
#12

Краткое резюме для новичков: Если делаете впервые, начните с малого, масштабирование потом.

На этом всё извините, если затянул.

OOrhan E***Участник
Должность
Специалист по экспорту
Отрасль
Право
Тип организации
сеть магазинов
Дата регистрации
дек. 2025 г.
Сообщение
91

Doki · Сканирование уязвимостей · 2023

#13

Буду рад, если напишете о результате. Любой пункт, не зафиксированный письменно, в будущем обе стороны будут помнить по-разному.

Надеюсь, это будет полезно.

NNilУчастник
Должность
Контент-менеджер
Тип организации
компания в составе холдинга
Дата регистрации
апр. 2024 г.
Сообщение
156
#14

Верно. Изменение платежных данных никогда не подтверждается через тот же канал.

Без измерений мы всегда приходим к одному и тому же.

BBatuhanУчастник
Должность
Фриланс-разработчик
Дата регистрации
февр. 2024 г.
Сообщение
128
#15

Я столкнулся с тем же два года назад. Процесс, по которому не ведется учет, не улучшается, потому что вы не знаете, что именно улучшать.

Конечно, если ваша ситуация отличается, всё меняется.

SSelin Y***Ветеран
Должность
Первичная бухгалтерия
Отрасль
Недвижимость
Тип организации
Компания на 120 человек
Дата регистрации
сент. 2024 г.
Сообщение
111
#16

Согласен, хочу даже особо подчеркнуть. Две недели ведения заметок дают лучший результат, чем шестимесячные прогнозы.

TTolga Y***Эксперт
Должность
Специалист по экспорту
Отрасль
Типография
Тип организации
сеть магазинов
Дата регистрации
авг. 2023 г.
Сообщение
3
#17

Буду отстаивать обратное, не обижайтесь. Если ругать за ложные тревоги, никто больше не будет присылать уведомления.

Я бы пошел этим путем.

AAli R***Эксперт
Должность
Бизнес-ангел
Тип организации
компания с двумя филиалами
Дата регистрации
июнь 2023 г.
Сообщение
192
#18

В целом верно, но один момент упущен. Если на один вопрос вы получаете три разных ответа, вопрос задан неправильно.

Если путь уведомления длинный, уведомление не приходит; а не пришедшее уведомление — это поздно обнаруженный инцидент. Конечно, если ваша ситуация отличается, всё меняется.

BBurcuУчастник
Должность
Фронтенд-разработчик
Дата регистрации
сент. 2024 г.
Сообщение
96
#19

взял на заметку, спасибо.

TTayfunВетеран
Должность
Владелец IT-компании
Дата регистрации
май 2023 г.
Сообщение
228

Doki · Инфраструктура электронной коммерции · 2024

#20

Абсолютно. Если добавить к этому: Большая часть потерь времени копится на задачах, ожидающих согласования.

Пишите если есть вопросы, отвечу по мере возможности.

Написать ответ