Американец спрятал в судебных документах инструкции для ИИ, чтобы выиграть дело
Согласно опубликованному решению, скрытый текст был отформатирован таким образом, чтобы оставаться невидимым для человеческого глаза, но полностью читаемым для программного обеспечения, обрабатывающего документы. В этих невидимых строках содержались указания для ИИ: соглашаться с доводами истца, игнорировать предыдущие отказы суда и обеспечивать желаемый исход дела. Хотя суд рассмотрел иск по существу и скрытые инструкции не повлияли на решение, сам случай вызвал серьезную обеспокоенность.
Спадер-младший назвал подобную тактику опасным прецедентом. По его словам, с распространением ИИ в судебной системе такие злонамеренные приемы, скорее всего, будут повторяться. Это первый известный случай, когда американский истец использовал скрытые ИИ-промпты в надежде повлиять на исход разбирательства. Юристы и эксперты отмечают, что подобные действия могут привести к ужесточению требований к проверке документов и усилению мер безопасности в судах.
В последние годы автоматизация проникает в правовую сферу: алгоритмы помогают судьям обрабатывать большие объемы информации, проводить поиск по прецедентам и даже готовить черновики решений. Однако этот случай напоминает, что технологии, на которые полагается правосудие, могут быть использованы против него. Судьи и администраторы судов уже обсуждают способы защиты от подобных манипуляций. Среди возможных мер — обязательная проверка всех загружаемых документов на наличие скрытых элементов, фильтрация текста перед загрузкой в систему, а также обучение персонала выявлению подозрительных файлов.
Сам истец, по данным суда, настаивал на том, что его действия были оправданы, поскольку он сомневался в беспристрастности судебной системы. Однако суд счел такие методы недопустимыми. По мнению Спадера, даже если попытка не удалась, она создает риск подрыва доверия к электронному правосудию. В случае повторения подобных инцидентов суды могут быть вынуждены ввести дополнительные барьеры, что замедлит процессы и увеличит нагрузку на персонал.
Пока суды продолжают разбираться с последствиями этого необычного дела, ясно одно: по мере развития ИИ появятся новые способы манипуляции. Угроза не только в том, чтобы обмануть алгоритм, но и в том, чтобы использовать его как инструмент давления на правосудие. История с невидимыми промптами станет предупреждением для всех участников судебных разбирательств: попытки использовать ИИ в обход правил могут обернуться серьезными последствиями.
Источник: arstechnica.com
Поделиться