Читаем Прикладные проблемы внедрения этики искусственного интеллекта в России. Отраслевой анализ и судебная система полностью

3. Одним из привлекательных принципов внедрения ИИ в судебную систему является его объективность. Ряд программ ИИ в судебной системе составлен из расчета нейтрализации дискриминационных ошибок. ИИ-судьи могут обойти известные факторы дискриминационного риска, использованные при человеческой оценке ситуации, а именно принятие во внимание возраста, расы, пола, происхождения, занятости, истории арестов, а также того, где человек живет.

Кейс.

При тестировании одной из программ по оценке вероятности совершения террористического акта из совокупности личных данных были удалены сведения о поле, расе, национальной принадлежности, возрасте, религиозном вероисповедании и т. д. Вместе с тем в доступных для программы данных была сохранена информация о родном языке подозреваемых. Программа показала высокий риск совершения террористического акта у всех тестируемых лиц, родным языком которых оказался фарси [Floridi et al., 2018].

Одна из этических проблем вынесения решений ИИ-судьями состоит в том, что в самых разнообразных базах данных по судебным приговорам практически всегда можно обнаружить дискриминационные компоненты. Очевидно, что в программах ИИ могут быть предрассудки, разделяемые их создателями-программистами и другими людьми, которые обслуживают функционал ИИ [Richardson, 2019]. Однако многие более усовершенствованные программы, основанные на нейросетях, способны к обучению и самостоятельному извлечению информации из массива данных. Хотя такие программы могут частично воспроизводить определенные человеческие предрассудки (косвенно через обработку данных, содержащих тот или иной градиент дискриминационных значений), важной особенностью нейросетей является то, что они могут вести себя спонтанно и непреднамеренно. По мере своего обучения они создают собственную сетку смыслов и ценностей. Однако нельзя быть уверенным, что при спонтанном самообучении машина не выработает дискриминационный алгоритм. Это может быть как результатом случая, так и закономерным итогом обработки некоторых данных. Например, если при обработке данных машина заметит, что чернокожих правонарушителей осуждали чаще или решения об оформлении опекунства чаще принимались в пользу женщин, то для ИИ это может сработать в качестве паттерна, по которому он обучится. Данный паттерн ляжет в основу будущих решений нейросетевого ИИ и будет определять его дальнейшее самообучение. Следует понимать, что дискриминация как социальный и этический феномен содержит сложный смысловой и ценностный компонент, который едва ли можно формализовать. Семантический анализ предполагает изначальный ввод ценностной матрицы, однако если данный ввод сам по себе является предвзятым, «прописанным» под определенный интерес или нерепрезентативным по отношению к населению, то это будет источником деформации анализа и прогнозов. Алгоритмизированные системы проверки данных при этом будут воспроизводить решение или даже усиливать предвзятость и, следовательно, дискриминацию. Для ИИ любой принцип выделения может прочитываться как дискриминационный и, наоборот, ни один дискриминационный аспект может не противоречить обычной процедуре выделения. Например, фильтрация дел по годам или странам ничем не отличается от фильтрации дел по возрасту или по полу [Burr, Cristianini, Ladymann, 2018]. Блокировка фильтрации по определенным параметрам, однако, не исключает косвенного извлечения фильтрующей информации из других, разрешенных источников. В частности, высокий процент правонарушений в определенный год или в определенный стране за фиксированный промежуток времени, скорее всего, будет использован ИИ против обвиняемого, который будет иметь отношение к данной стране или году. Поэтому искоренение риска дискриминационных решений становится наиболее трудоемкой этической задачей на пути применения ИИ в рамках правовых решений [Asada, 2019]. Поскольку избежать любой дискриминационной предвзятости по отношению к меньшинствам и уязвимым группам сложно в связи с непредсказуемостью процесса самообучения ИИ, то следует уделять особое внимание механизму обратной связи. Если некое статистическое или вероятностное решение было принято системой, то она должна уметь отчитываться об этом и объяснять понятным образом.

Перейти на страницу:

Похожие книги

21 урок для XXI века
21 урок для XXI века

В своей книге «Sapiens» израильский профессор истории Юваль Ной Харари исследовал наше прошлое, в «Homo Deus» — будущее. Пришло время сосредоточиться на настоящем!«21 урок для XXI века» — это двадцать одна глава о проблемах сегодняшнего дня, касающихся всех и каждого. Технологии возникают быстрее, чем мы успеваем в них разобраться. Хакерство становится оружием, а мир разделён сильнее, чем когда-либо. Как вести себя среди огромного количества ежедневных дезориентирующих изменений?Профессор Харари, опираясь на идеи своих предыдущих книг, старается распутать для нас клубок из политических, технологических, социальных и экзистенциальных проблем. Он предлагает мудрые и оригинальные способы подготовиться к будущему, столь отличному от мира, в котором мы сейчас живём. Как сохранить свободу выбора в эпоху Большого Брата? Как бороться с угрозой терроризма? Чему стоит обучать наших детей? Как справиться с эпидемией фальшивых новостей?Ответы на эти и многие другие важные вопросы — в книге Юваля Ноя Харари «21 урок для XXI века».В переводе издательства «Синдбад» книга подверглась серьёзным цензурным правкам. В данной редакции проведена тщательная сверка с оригинальным текстом, все отцензурированные фрагменты восстановлены.

Юваль Ной Харари

Обществознание, социология
Антипсихиатрия. Социальная теория и социальная практика
Антипсихиатрия. Социальная теория и социальная практика

Антипсихиатрия – детище бунтарской эпохи 1960-х годов. Сформировавшись на пересечении психиатрии и философии, психологии и психоанализа, критической социальной теории и теории культуры, это движение выступало против принуждения и порабощения человека обществом, против тотальной власти и общественных институтов, боролось за подлинное существование и освобождение. Антипсихиатры выдвигали радикальные лозунги – «Душевная болезнь – миф», «Безумец – подлинный революционер» – и развивали революционную деятельность. Под девизом «Свобода исцеляет!» они разрушали стены психиатрических больниц, организовывали терапевтические коммуны и антиуниверситеты.Что представляла собой эта радикальная волна, какие проблемы она поставила и какие итоги имела – на все эти вопросы и пытается ответить настоящая книга. Она для тех, кто интересуется историей психиатрии и историей культуры, социально-критическими течениями и контркультурными проектами, для специалистов в области биоэтики, истории, методологии, эпистемологии науки, социологии девиаций и философской антропологии.

Ольга А. Власова , Ольга Александровна Власова

Медицина / Обществознание, социология / Психотерапия и консультирование / Образование и наука