Индикаторы оптимизации законодательства и правоприменения и методы их идентификации и использования на основе больших данных (опыт вычислительных экспериментов на судебных актах по делам об административных правонарушениях, предусмотренных главой 18 Кодекса Российской Федерации об административных правонарушениях)

Источник финансирования: Исследование выполнено при финансовой поддержке РФФИ в рамках научного проекта № 20-011-00837.
Funding: The reported study was funded by RFBR, project number 20-011-00837.

1. Введение

Стремительное развитие компьютерных технологий, а затем и цифровой реальности обусловило их неизбежное соприкосновение с областью права. С 1950-х гг. во многих странах разрабатываются и внедряются компьютерные методы и системы для изучения права, интеллектуального анализа и моделирования правовой деятельности, так что сегодня наблюдаются успехи в разработке и внедрении поисковых, управленческих, аналитических, предиктивных и контрольных информационных систем, предназначенных для поддержки принятия решений в широком спектре юридических задач ^[1].

2. Проблема

В условиях динамичного развития правовой системы обработка и анализ юридических данных традиционными методами, включая правовую статистику и экспертные оценки, носят крайне ограниченный характер. Эти ограничения связаны, в частности, с объемами обрабатываемой информации, комплексностью и разнородностью данных, затратами ресурсов на обработку, анализ и интерпретацию результатов. Последствия этих ограничений — скудность информации, предоставляемой правовой статистикой, косность и субъективизм выводов, сделанных экспертами, недоверие и скептицизм к научным знаниям и рекомендациям, проявляемые законодателем, правоприменителем и обществом в целом. В то же время в сегменте AI & Law важную проблему составляет объяснительная задача в построении системы юридической аргументации ^[2]. Соединение двух названных проблем определяет направление междисциплинарного научного поиска.

3. Цель

Настоящее исследование посвящено разработке и обоснованию методологии качественной оценки оптимизации законодательства и правоприменительной практики на основе анализа больших данных. В качестве перспективного исследовательского средства прорабатываются индикаторы с учетом того, что индикаторы как средства исследования уже предлагались к использованию зарубежными исследователями для измерения права ^[3] и представляются удобным и понятным научным инструментом. В междисциплинарной юридическо-компьютерной области исследование использования индикаторов требует эвристического поиска адекватных компьютерных методов идентификации этих индикаторов, обоснования, апробации и проверки таких методов в вычислительных экспериментах.

На текущем этапе исследование проводится на данных дел об административных правонарушениях. В настоящей статье представлены результаты вычислительных экспериментов на судебных актах по делам об административных правонарушениях, предусмотренных главой 18 Кодекса Российской Федерации об административных правонарушениях.

4. Методология

В данном исследовании для проведения вычислительных экспериментов были использованы различные компьютерные методы, включая моделирование знаний, методы обработки естественного языка и методы машинного обучения (корреляционный анализ, классификацию, регрессию, ранжирование и др.). С названными методами были сопряжены в рамках междисциплинарной парадигмы методы системного анализа и экспертной оценки.

Вычислительные эксперименты по использованию методов интеллектуального анализа и машинного обучения производились на эмпирической базе, сформированной из текстов 50438 судебных актов по делам об административных правонарушениях, предусмотренных отдельными статьями главы 18 КоАП РФ.

Тексты судебных актов выражены на естественном языке, в связи с чем были подвергнуты автоматизированной обработке для извлечения данных методами, ранее обоснованными авторами ^{[4] [5] [6]}.

Для верификации полученных результатов привлекались данные судебной статистики, упомянутые ниже.

5. Результаты

На больших данных дел об административных правонарушениях были получены междисциплинарно (с компьютерной и юридической сторон) интерпретируемые результаты при использовании и идентификации ряда индикаторов оптимизации законодательства и правоприменения, прежде всего — временного индикатора, индикатора индивидуализации наказания и индикатора предметной однородности. Одновременно были сделаны некоторые выводы и обобщения относительно законодательства и правоприменения в рассматриваемой области.

Изменение корреляции данных о применении законодательной нормы с данными о периоде времени — это временной (динамический) индикатор, который указывает на наличие изменений в правоприменительной практике, если величина корреляции различна для разных периодов времени. Как правило, изменения в величине корреляции статьи закона на период времени связаны со значительными изменениями в самом законе. На примере корреляционной матрицы (рис. 1) видно, что правонарушения, предусмотренные статьями 18.1, 18.2, 18.8, 18.10, 18.11, 18.15, 18.16 и 18.17 КоАП РФ, не коррелируют на 2016, 2017 и 2018 гг. Этот результат интерпретируется как отсутствие значимых для правоприменения изменений за эти годы в указанных статьях главы 18 КоАП РФ.

Рис 1. Корреляционная матрица данных, извлеченных из судебных актов

Этот вывод подтверждается наблюдением, согласно которому последние существенные изменения законодатель внес: в статью 18.1 — в 2009 г.; в статью 18.2 — в 2014 г.; в статью 18.8 — в 2013 г. (в 2016 г. в этой статье выделены только специальные части с более суровыми санкциями за те же правонарушения, совершенные в городах Москве и Санкт-Петербурге, Московской и Ленинградской областях); в статью 18.10 — в 2015 г.; в статью 18.11 — в 2007 г. (в 2016 г. было внесено техническое изменение, касающееся термина); в статью 18.15 — в 2015 г. (в 2016 г. было внесено техническое изменение, касающееся термина); в статью 18.16 — в 2014 г.; в статью 18.17 — в 2013 г. В названных статьях не было обнаружено изменения нулевого значения корреляции для временных периодов 2016, 2017 и 2018 гг. Напротив, на статье 18.9 идентифицирован временной индикатор: значения корреляции в 2017 и 2018 гг. (нулевая корреляция) изменились по сравнению с 2016 г. (положительная корреляция). В данном случае это динамический показатель, который следует за некоторым существенным изменением практики привлечения к административной ответственности за совершение административного правонарушения, предусмотренного статьей 18.9 КоАП РФ. Наличие правоприменительных изменений объективно подтверждается тем, что законодатель вносил изменения в статью 18.9 КоАП РФ в 2017 и 2018 гг.

При этом важно отметить два момента. Во-первых, результаты вычислительных экспериментов позволяют сделать вывод о том, что не все законодательные изменения влияют на практику применения статей закона. В частности, в отношении статей 18.8, 18.11 и 18.15 КоАП РФ временной индикатор не проявился, поскольку изменения в законе не были связаны с анализируемыми данными: в статье 18.8, помимо общих составов, в некоторых частях статьи были выделены специальные составы, а в статьях 18.11 и 18.15 устаревший термин был актуализирован в системе действующего законодательства. Таким образом, временной индикатор показывает существенность влияния законодательных изменений на реальную правоприменительную практику.

Во-вторых, определение характера изменений, произошедших в рассматриваемые периоды времени, требует использования дополнительных исследовательских средств и методов, определяемых на основе коррелируемых данных. Корреляционный анализ позволяет всего лишь выявить доменные области, в которых произошли изменения в рассматриваемые временные промежутки.

В этом отношении можно указать на связь между корреляцией периода времени со смягчающими и отягчающими обстоятельствами, с одной стороны, и индикатором индивидуализации наказания — с другой.

Индикатором индивидуализации наказания — одного из важнейших принципов юридической ответственности и правовой политики — является корреляция нормы применяемого закона на смягчающие или отягчающие обстоятельства. Отсутствие индивидуализации наказания (нулевая корреляция со смягчающими и отягчающими обстоятельствами) означает нарушения в процессе правоприменения, кроме случая, когда законом предусмотрена безальтернативная санкция. В прочих случаях отсутствие корреляции со смягчающими или с отягчающими обстоятельствами, означает, что правоприменитель чрезмерно упрощает производство по делу, избегая выяснения фактических обстоятельств, которые по закону влияют или могут повлиять на назначение наказания, а налагаемое наказание, таким образом, остается неиндивидуализированным. В таких случаях правоприменительная практика ориентирована на назначение минимального наказания, что сводит к минимуму риск обжалования и, как следствие, риск отмены акта правоприменения. Однако такой правоприменительный подход нарушает правила назначения административного наказания (прежде всего, статью 4.1 КоАП РФ) и делает альтернативные (не минимальные) меры наказания, предусмотренные законодателем, «мертвыми».

Например, статья 18.1 КоАП РФ предусматривает относительно определенные санкции. В наиболее часто применяемых частях 1 и 2 этой статьи наказание для граждан предусмотрено в виде административного штрафа в размере от 2000 до 5000 рублей, однако на практике административный штраф налагается в минимальном размере 2000 рублей (это подтверждают и данные ведомственного статистического наблюдения ^{[7, стр. 201 разд. 1] [8, стр. 246 разд. 1] [9, стр. 261 разд. 1]}). Корреляционная матрица (рис. 1) показывает, что статья 18.1 имеет нулевую корреляцию с обстоятельствами, смягчающими и отягчающими административную ответственность. Напротив, статьи 18.8 и 18.15 Кодекса имеют ненулевую (положительную или отрицательную) корреляцию со многими обстоятельствами, влияющими на индивидуализацию наказания.

На рис. 2 на тех же кейсах показана значимость различных параметров дела для определения размера штрафа.

Рис. 2. Значимость признаков для размера административного штрафа

Так, обстоятельства, смягчающие и отягчающие ответственность («Extenuating» и «Aggravating») имеют практически одинаковую значимость для определения размера штрафа, но различные виды смягчающих и отягчающих обстоятельств значительно различаются: например, раскаяние («Repentance») является более значимым смягчающим обстоятельством с показателем 588, чем содействие в расследовании правонарушения («Assistance») с показателем 93. Основными причинами таких различий является привычность обстоятельств для юридической практики. «Раскаяние» в содеянном очень часто устанавливается судом путем получения от правонарушителя ответа на стандартный вопрос: «Раскаиваетесь ли Вы в содеянном?». Для правонарушителя такое «раскаяние» преследует цель добиться более мягкого административного наказания, а доказательством раскаяния являются только слова правонарушителя, как и в случае признания им вины («Guilt admission» с показателем 509). «Содействие» правосудию устанавливается на основе реальных действий правонарушителя, которые случаются редко и еще реже фиксируются документально. Поэтому «содействие» оказывается более редким и непривычным для суда обстоятельством и меньше влияет на размер штрафа, чем «раскаяние», хотя обладает неизмеримо большей социальной полезностью.

Вместе тем описанный метод часто не позволяет установить направленность влияния одних параметров на другие. Для этого могут быть использованы другие методы. В частности, на рис. 3 на массиве судебных актов по отдельным статьям главы 18 КоАП РФ на основе SHAP value ^[10] показан характер влияния (позитивного или негативного) различных параметров дела на результат судебного пересмотра дела.

Рис. 3. Распределение значимости признаков для исхода дела

Например, установление судом любых смягчающих обстоятельств («Extenuating») связано с оставлением без изменения ранее вынесенного постановления о назначении административного наказания (красный цвет на рисунке смещен в отрицательные значения), тогда как отмена постановления соотносится с отсутствием установленных судом смягчающих обстоятельств (синий цвет на рисунке смещен в положительные значения). Такой результат объясняется тем, что смягчающие обстоятельства устанавливаются судом для смягчения наказания, т.е. в ситуации, когда административное наказание должно быть назначено и когда отсутствуют основания для прекращения производства по делу. Смысл этой связи хорошо объясняют такие смягчающие обстоятельства, как раскаяние («Repentance») и признание вины («Guilt admission»): установление этих обстоятельства означает, что лицо действительно виновно в совершении правонарушения (лицо раскаивается в совершенном деянии или признает свою вину), а потому суд отказывает в отмене ранее вынесенного постановления о назначении наказания.

Напротив, установление обстоятельств, исключающих производство по делу («Exceptional circumstances (Art. 24.5)»), показывает их высокую значимость для отмены ранее вынесенного постановления. Такой же результат показывает установление малозначительности правонарушения («Insignificance (Art. 2.9)»), что влечет освобождение от административной ответственности.

Интересно, что отягчающие обстоятельства («Aggravating»), взятые в совокупности, не имеют явной связи ни с отменой ранее вынесенного постановления, ни с оставлением этого постановления без изменений. Учитывая, что смягчающие и отягчающие обстоятельства по закону в равной мере входят в предмет доказывания по делу, это означает, что на практике процесс установления смягчающих обстоятельств имеет отличия от процесса установления отягчающих обстоятельств. В установлении смягчающих обстоятельств заинтересованы и правонарушитель, который благодаря им может получить менее суровое наказание, и суд, который благодаря им выносит такое решение, которое в дальнейшем с меньшей вероятностью будет обжаловано и отменено по мотивам суровости назначенного наказания. По этим же причинам выявлять отягчающие обстоятельства, которые приведут к ужесточению наказания, никто не заинтересован, и они выявляются в ходе производсьва по делу в силу объективных причин (очевидности, наличия соответствующей информации в официальных базах данных и т.д.).

По рассматриваемым составам административных правонарушений часто привлекаются к ответственности иностранные граждане. Поэтому именно по данной категории дел такое обстоятельство, как наличие у правонарушителя несовершеннолетних детей, в некоторых случаях может оказывать большое влияние на отмену ранее вынесенного постановления о назначении наказания (на рис. 3 — красные точки в положительном значении на строке «Have a baby»). Смысл этой значимости в том, что правонарушитель-иностранец может иметь ребенка с российским гражданством, и в этой ситуации суд иногда находит какие-то основания для отмены ранее вынесенного постановления о назначении наказания, действуя в интересах интернациональной семьи.

Некоторые зависимости более сложные. В частности, в строке размера штрафа («Fine-size») видно, что средние размеры штрафов (фиолетовые точки в отрицательных значениях) хорошо соотносятся с отказом в пересмотре ранее вынесенного постановления, тогда как низкие и высокие штрафы (синие и красные точки) имеют практически нулевую корреляцию с отменой ранее вынесенного постановления. Такой результат по рассматриваемой категории дел может иметь большое количество интерпретаций, что требует дальнейшего интеллектуального анализа.

Описанный выше метод позволяет выявлять значимость влияния любых параметров дела на результат его разрешения, а для прояснения и интерпретации полученных результатов допустимо использовать как традиционные методы, так и другие вычислительные инструменты.

Машинное обучение, основанное на методах классификации и регрессии ^[11], позволило построить дерево решений (рис. 4) по группе статей главы 18 КоАП РФ (статьи 18.1, 18.2, 18.8, 18.9, 18.10, 18.11, 18.15, 18.16 и 18.17). Полученное дерево показывает, что дерево решений обладает эвристическим потенциалом не только в отношении одной законодательной нормы (в административно-деликтной сфере — одной статьи либо части статьи), как это было показано в ранних работах авторов ^{[12] [13]}, но и на группе законодательных норм. Это дерево решений построено с учетом не только фактических обстоятельств дела, но и различных статей КоАП РФ и временных периодов (лет).

Рис. 4. Дерево решений по группе статей главы 18 КоАП РФ

Полученное дерево показало, что на основе больших данных можно выявить сходство в решении правовых вопросов (в данном случае: определения размера штрафа) не только по одному виду правонарушения, но по группе правонарушений. Индикатором специфичности правового решения в данном случае выступает статья КоАП РФ (вид правонарушения), которая находится в основании ветвления дерева (статья 18.15) и на более низких уровнях (статья 18.11). Неспецифичные решения не зависят от вида правонарушения, поэтому другие статьи КоАП РФ (18.1, 18.2, 18.8, 18.9, 18.10, 18.16 и 18.17) в дереве не фигурируют, что является вариантом индикатора предметной однородности. На рис. 4 видно, что для решения вопросов по статье 18.15 (правая часть дерева) имеет значение период времени (2016 г.), который определил классификационную значимость одного из двух обстоятельств: содействие в раскрытии правонарушении для 2016 г., признание вины — для прочих лет.

6. Заключение

В современной правовой политике принято оперировать правовыми целями как основанием для принятия определенных решений в сфере законотворчества, толкования права и правоприменения. Использование индикаторов позволяет проверить, были ли достигнуты поставленные политико-правовые цели. При описании юридических целей часто бывает трудно сравнить конкретные показатели с этими целями. В настоящее время эта проблема может быть частично решена привлечением экспертных оценок, но в будущем накопление знаний о взаимосвязи между правовыми целями, индикаторами и вычислительными методами их идентификации может снизить роль экспертных знаний для оценки оптимизации законодательства и правоприменения.

Вычислительные методы и набор индикаторов могут быть разработаны как основа для принятия решений в области правовой политики. Преимущества данной методологии — объективность выводов, основанная на методологии, открытой для публичной проверки, и больших юридических данных, обеспечивающих полноту исследования. В то же время экспертная оценка или иные средства контроля вычислений всегда должны служить одним из инструментов проверки адекватности расчетных выводов на каком-либо этапе исследования.