Генерация текстов 18+ нейросетью на сайте: что грозит и как защититься?

(2 ответа)

Я владелец сайта и мобильного приложения с текстовой ролевой игрой. Игрок пишет действия героя, нейросеть-ведущий продолжает историю. Работаю как самозанятый, игроки платят за использование нейросети внутри игры.

Нейросеть может по запросу игрока написать откровенную или жестокую сцену (текст, без картинок). Генерирую не я, а модель по запросу конкретного взрослого пользователя. Результат видит только он, публично не выкладывается. Есть раздел с общими карточками персонажей, там включается фильтр «Показывать 18+».

Вопросы:

Может ли это считаться изготовлением или распространением порнографии (ст. 242 УК РФ), если текст создаёт нейросеть по запросу одного взрослого пользователя и видит его только он?
Что обязательно нужно сделать, чтобы работать законно: маркировка 18+ (436-ФЗ), подтверждение возраста (достаточно ли галочки «мне есть 18»), пункты в пользовательском соглашении, фильтры?
Какие темы нужно запрещать жёстко, независимо от согласия пользователя (несовершеннолетние, насилие, экстремизм и т. п.), и насколько я отвечаю, если фильтр модели пропустил запрещённое?
Отличается ли ответственность для самозанятого и для ИП/ООО?

Довгань Денис Александрович
  • Быстрый ответ - ответ в течение 15 минут
  • Активный юрист - юрист, ответивший более 50 вопросов за 7 дней
  • Подробный ответ - ответ более 350 символов
Отвечает юрист
Стаж 1 год

Полноценным изготовлением порнографии (ст. 242 УК РФ) генерация индивидуального текста нейросетью обычно не признается, но риск привлечения к ответственности крайне высок, так как закон не успевает за технологиями, а правоприменитель может посчитать вас организатором процесса. Вы, как владелец платформы, несете юридическую ответственность за весь контент, проходящий через ваши сервера. То, что текст видит только один пользователь, исключает «публичную демонстрацию», но не исключает понятия «распространение» (передача от вашего сервиса к пользователю) или «изготовление в целях распространения», если контент будет признан порнографическим экспертизой. С точки зрения закона, вы — владелец информационной системы (организатор распространения информации / владелец сайта). Если ваша нейросеть (даже сторонняя по API) выдала пользователю текст, нарушающий закон (например, с элементами ЦП или экстремизма), ответственность несете именно вы. Списать это на «глюк алгоритма» не удастся. Как самозанятый вы имеете право перепродавать услуги чужих нейросетей, если вы создали свой уникальный программный продукт (код сайта/приложения, логику игры). Но если обороты начнут расти, лимит в 2.4 млн рублей в год заставит вас перейти на ИП. Для снижения личных финансовых рисков по гражданским искам крупные проекты переводят на ООО, но от штрафов Роскомнадзора и уголовной ответственности (которая всегда персональна) ООО не защитит.

✅ Готов оказать юридические услуги в любом виде (платно). Контакты (TG, MAX, WhatsApp), доступны в анкете, с уважением, Довгань Д.А. Для консультаций (платных) писать в мессенджер.
Гость

Уточните, пожалуйста. Я планирую следующие меры: Вход только для 18+: галочка «мне есть 18, принимаю соглашение» с датой в базе. Достаточно ли этого, или по закону нужна проверка документа?Автоматический фильтр запрещённых тем (несовершеннолетние, экстремизм, наркотики, суицид) на запросы и ответы нейросети, плюс блокировка аккаунта нарушителя.Знак «18+» на сайте и в приложении, в соглашении — запрет таких запросов и ответственность пользователя.Вопросы: — Если при этих мерах фильтр всё же пропустил запрещённый текст, отвечаю ли я, или добросовестные меры защищают?— Какие конкретные статьи КоАП и штрафы грозят за отсутствие маркировки или проверки возраста?— Нужно ли хранить тексты игр как доказательство, и сколько, или наоборот лучше не хранить?

Юристы по интернет праву

Подборка юристов, которые специализируются на вопросах этой категории и помогут в вашей ситуации.

Открыть список
Потапов Никита Андреевич
  • Высокий рейтинг - юрист с рейтингом от 9 баллов
Отвечает юрист
Стаж 9 лет

Добрый день!
К сожалению да - правоприменительная практика идет по пути признания сгенерированных изображений изготовлением и распространением порнографии, при чем как пользователя, так и владельца платформы.
Вас следуют ставить технические ограничения платформы на генерацию изображений 18+

На ваш вопрос ответила нейросеть, вы можете уточнить детали или задать другой вопрос
Ответ сгенерирован нейросетью и носит справочный характер: возможны неточности, он не заменяет консультацию юриста. Более точное решение по вашей ситуации дадут юристы HARANT.
Ответ нейросети:
1. Правовая оценка ситуации
Ваш сервис позволяет взрослым пользователям получать сгенерированные нейросетью тексты, в том числе откровенного или жестокого характера, по индивидуальному запросу. Контент не выкладывается публично, доступен только конкретному пользователю. Это снижает риски, но не исключает их полностью.

2. Применимые нормы права
- Ст. 242 УК РФ (изготовление и распространение порнографии) — под уголовную ответственность попадает как массовое распространение, так и изготовление порнографических материалов. Однако, по сложившейся практике, за индивидуальный текст, сгенерированный по запросу совершеннолетнего пользователя и не распространяемый третьим лицам, привлечение к ответственности маловероятно, если нет признаков публичности или коммерческого распространения.
- Федеральный закон № 436-ФЗ (о защите детей от информации, причиняющей вред их здоровью и развитию) — требует маркировки 18+ и защиты от доступа несовершеннолетних.
- Ст. 242.1, 242.2 УК РФ — запрещают оборот материалов с участием несовершеннолетних, вне зависимости от согласия пользователя.
- Ст. 282 УК РФ (экстремизм), ст. 354.1 УК РФ (реабилитация нацизма) и др. — запрещают распространение экстремистских материалов, оправдание насилия и т.п.

3. Риски, ответственность, нюансы
- Если фильтр не сработает и нейросеть сгенерирует запрещённый материал (например, детскую порнографию, пропаганду насилия, экстремизм), ответственность потенциально ложится на владельца платформы, даже если это произошло автоматически.
- Самозанятый, ИП и ООО несут ответственность как физические или юридические лица. Для самозанятого (физлица) ответственность по УК РФ — личная, для ООО — может быть и административная, и уголовная для руководителей.
- «Галочка» о возрасте не считается достаточной мерой для защиты от доступа несовершеннолетних — регуляторы требуют более надёжных способов подтверждения возраста.
- В пользовательском соглашении важно прямо запрещать размещение, генерацию и распространение запрещённых материалов, предусматривать санкции за нарушение.

4. Что делать пошагово
а) Внедрить эффективную возрастную верификацию — по возможности использовать сервисы проверки документов или двухфакторную аутентификацию, а не только галочку.
б) Маркировать контент 18+ — на сайте, в приложении, в разделе карточек.
в) Настроить фильтры нейросети — категорически запрещать генерацию:
- материалов с участием/описанием несовершеннолетних в сексуальном контексте;
- сцен реального насилия, жестокости, оправдания суицида;
- экстремистских, террористических, разжигающих ненависть материалов;
- пропаганды наркотиков.
г) Пользовательское соглашение — прописать запрет на генерацию и получение запрещённых материалов, ответственность пользователя, право блокировки.
д) Мониторинг — периодически проверять, как работают фильтры, и корректировать их.
е) Хранить логи — фиксировать действия пользователя и сгенерированные тексты (или хотя бы метаданные), чтобы иметь доказательства добросовестности в случае претензий.

5. Что уточнить
Для более точной оценки важно знать:
- Как реализована система подтверждения возраста?
- Как устроен фильтр нейросети и есть ли ручная модерация?
- Есть ли возможность пользователям делиться сгенерированным контентом?
- Где размещён сервер (на территории РФ или за рубежом)?

Вывод:
Ваши основные риски связаны с возможностью генерации и получения запрещённого контента, особенно если речь идёт о несовершеннолетних, насилии, экстремизме. Для минимизации рисков внедрите строгие фильтры, надёжную верификацию возраста и корректное пользовательское соглашение. Ответственность для самозанятого и ИП/ООО отличается только формой (физлицо/юрлицо), но по сути риски схожи.

Для точной оценки вашей ситуации и документов рекомендую проконсультироваться с юристом.
Остались вопросы?

Задайте вопрос всем юристам на сайте
570 юристов отвечают
3 минуты среднее время ответа
167 вопросов за сутки
Опишите ваш вопрос или ситуацию простыми словами. Начните с вопросительных слов, таких как «Что», «Как», «Можно ли» и т.д.

Юристы по Интернет праву