Википедия:Вики-конференция 2008/Результаты/Чёрный ящик Арбитражного комитета

Текст доклада

Введение

Что такое Арбитражный комитет? На взгляд автора, лучшее определение даёт английский раздел. В вольном переводе оно звучит следующим образом: «Арбитражный комитет — это избираемая на определённый срок группа опытных участников, призванная разрешать различные конфликты в Википедии, которые оказалось невозможно разрешить иными методами». Определение, в данный момент используемое в русском разделе («Арбитражный комитет — высший судебный орган русскоязычного раздела Википедии»), хотя и является более кратким, может дать не вполне точное представление о реальных функциях Арбитражного комитета.

Арбитражный комитет (АК) — одна из немногих структур Википедии, в деятельности которых отсутствует прозрачность, являющаяся естественным атрибутом Википедии, где каждый может увидеть любую правку, даже затёртую впоследствии. Для внешнего сообщества Арбитражный комитет выглядит чёрным ящиком, на вход которого подаются иски, а на выходе получаются решения. Именно из-за этой непрозрачности работа Арбитражного комитета интересна участникам, следствием чего является потребность в подобных докладах. Первый доклад о работе АК был сделан Александром Сигачёвым на вики-конференции 2007.

В разделе Википедии на русском языке Арбитражный комитет выполняет три основные функции, связанные с решением трёх типов исков.

1. Трактовка правил. Иски о трактовке правил фактически являются просьбой подвести итог какого-то обсуждения, когда этот итог невозможно подвести никаким другим образом.
2. Разрешение межличностных конфликтов. Обилие этих исков связано с тем, что в нашем разделе пока довольно мало других механизмов разрешения этих конфликтов. В тех случаях, когда в английской Википедии деструктивно настроенного участника забанили бы без особых раздумий, у нас с этим приходится обращаться в Арбитражный комитет.
3. Технические иски. Это набор указанных в правилах формальных функций АК: снятие флага, назначение проверяющих и т.д.

АК разных разделов

Как видно из таблицы 1, впервые Арбитражный комитет был создан в английском разделе в начале 2004 года. До этого все функции Арбитражного комитета по разрешению конфликтов выполнял лично основатель Википедии Джимбо. Когда ему это надоело, он решил передать эти функции группе доверенных участников. Изначально в английском разделе арбитры назначались Джимбо. Начиная с конца 2004 года они фактически выбираются сообществом, хотя формально состав Арбитражного комитета по-прежнему утверждается Джимбо, который имеет право на волюнтаристские решения.

Раздел	Язык	Месяц создания АК
en	английский	01.2004
fr	французский	03.2005
ru	русский	12.2005
cs	чешский	01.2006
sv	шведский	11.2006
es	испанский	01.2007
nl	нидерландский	02.2007
de	немецкий	05.2007
pl	польский	09.2007
fi	финский	10.2007
uk	украинский	02.2008
hu	венгерский	06.2008
Таблица 1. История создания АК

Таблица 1 содержит все языковые разделы Википедии, обнаруженные автором, которые имеют или имели Арбитражный комитет. Здесь представлены все крупные разделы за исключением японского, итальянского и португальского. Также присутствуют сравнительно малые чешский, финский, украинский и венгерский разделы.

В таблице 2 показана поквартальная зависимость числа исков, разобранных Арбитражными комитетами различных разделов. Как видно из этой таблицы, существуют только три действительно активных Арбитражных комитета: английский, французский и русский. Также существует несколько Арбитражных комитетов, а именно, немецкий, испанский, нидерландский и польский, которые работают систематически, хотя и с гораздо меньшей загрузкой. Характерно, что во всех четырёх малах разделах (чешский, финский, украинский и венгерский) Арбитражные комитеты практически не работают.

		2004				2005				2006				2007				2008
		1	2	3	4	1	2	3	4	1	2	3	4	1	2	3	4	1	2	3
cs	Неактивен
de	Решено														1	4	5	6	3	2
en	Решено	4	3	10	18	31	18	18	33	38	22	29	27	21	16	24	30	17	10	5
es	Решено													1	3	4	4	2	1	0
fi	Решено																		1	0
fr	Решено							11	22	18	12	9	10	5	7	3	10	7	4	3
hu	Неактивен
nl	Решено													3	4	4	2	4	1	4
pl	Решено																3	2	1	2
ru	Подано									11	10	16	25	21	24	32	24	22	35	11
sv	Принято													2	0	1	0	0	0	0
uk	Неактивен
Таблица 2. Загруженность АК

Рисунок 1. График загруженности арбитражных комитетов различных разделов Википедии: поквартальная зависимость числа рассмотренных исков

Эти же данные, но только по четырём крупнейшим Арбитражным комитетам, в графической форме представлены на рисунке 1. Как видно на графике, в последний год Арбитражный комитет русского раздела по своей загруженности обходит АК английского раздела, хотя в английском разделе на порядок больше статей и участников и втрое больше арбитров, чем в русском разделе. График французского же раздела соответствует графику английского как по динамике числа исков, так и по объёмам, которые соотносятся с разницей объёмов этих разделов. Общая тенденция всех представленных кривых состоит в том, что в последнее время число исков падает. Это особенно хорошо выражено во французском разделе, чуть менее — в английском. Автор надеется, что снижение загрузки русского раздела также не является случайной флуктуацией.

Внутренний регламент работы

При изучении активности Арбитражного комитета необходимо учитывать, что взаимодействие между арбитрами, связанное с обсуждением исков, может осуществляться по различным каналам. Основным каналом в Арбитражном комитете русского раздела является рассылка АК, действующая с марта 2006 года и обеспечивающая преемственность АК. Существуют также другие каналы. Достоинства и недостатки открытого рассмотрения исков на страницах Википедии будут рассмотрены позже. Общение арбитров в интернет-конференциях (Skype, ICQ, IRC) было особенно распространено в практике АК-5 — во многом благодаря этому механизму составу АК-5 удавалось работать достаточно оперативно. Дорабатывать формулировки решения удобно на внешних ресурсах — насколько известно автору, это практиковалось АК-2. Наконец, огромную помощь в рассмотрении исков могут оказывать личные встречи арбитров, что особенно часто случалось в практике АК-4.

Рисунок 2. Число писем в рассылке Арбитражного комитета русского раздела Википедии по месяцам

Учитывая всё это, единственной распространённой характеристикой интенсивности взаимодействия арбитров является число писем в арбитражной рассылке. Впервые соответствующий график с точностью до состава был представлен Александом Сигачёвым на предыдущей конференции; в данном докладе этот график представлен с точностью до месяца, что даёт возможность не только определить глобальную динамику активности АК, но и уловить важную закономерность изменения активности внутри состава. Как видно из рисунка 2, напоминающего совокупность цепных линий, после первых двух месяцев работы на энтузиазме Арбитражный комитет регулярно снижает активность, чтобы за месяц—два до окончания своих полномочий вновь приступить к активной работе. Кроме того, в соответствии с общим увеличением загруженности Арбитражного комитета его активность растёт от состава к составу.

Работу над иском в настоящее время можно разделить на следующие этапы.

1. После подачи иска арбитры проводят анализ ситуации, чтобы составить для себя представление об условиях, в которых был подан соответствующий иск.
2. Далее арбитры должны определить сути иска. Не секрет, что зачастую истцы и ответчики подходят к проблеме слишком конкретно. Арбитры должны понять, что именно стороны хотели узнать, но забыли спросить.
3. Уяснив всё это, арбитры высказывают мнения по решению: что хорошо бы так или иначе упомянуть в решении, как следует оценить ту или иную проблему.
4. После этого происходит выработка концепции решения — чёткого понимания того, как именно должно быть построено решение.
5. Затем один из арбитров или несколько арбитров параллельно на основе согласованной концепции пишут проект решения. Иногда выясняется, что получившийся проект не вполне соответствует концепции — по крайней мере, в представлении некоторых арбитров. В таком случае концепция уточняется и проект пишется заново.
6. После написания проекта происходит доработка пунктов решения, когда отдельные пункты существенно дополняются или сокращаются. Иногда даже смысл пункта может изменяться на противоположный.
7. Заключительная стадия — доработка конкретных фраз решения. Такая доработка, как правило, носит стилистический характер и важна для устранения возможных недопониманий и неоднозначностей.

Внутренний регламент работы Арбитражного комитета не является неизменным. За прошедшие два с половиной года он претерпел существенные изменения. Наиболее яркими из них являются широта подхода и механизм принятия решения. Если первые составы АК предпочитали отвечать на конкретные вопросы истцов, то начиная с АК-3 постепенно вошло в практику комплексное решение проблемы. Решения по первым искам принимались путём формального голосования арбитров по конкретным вопросам — сейчас арбитрами вырабатывается единое консенсусное решение.

Полезно изучить опыт работы арбитражных комитетов других языковых разделов Википедии. Пожалуй, наиболее чётко прописан внутренний регламент работы АК французского раздела. Из его отличительных особенностей можно выделить следующие.

1. Арбитражный комитет французского раздела состоит из 10 арбитров. О принятии или отклонении иска голосуют все 10 арбитров, но принятый иск рассматривают всего пять арбитров. Состав этой пятёрки определяется порядковым номером принятого иска, причём соответствие между номером принятого иска и пятёркой арбитров устанавливается на полгода вперёд после очередных выборов АК. В случае краткосрочного вики-отпуска одного из арбитров данной пятёрки он может быть заменён одним из арбитров, которые не должны были рассматривать этот иск.
2. По каждому принятому иску определяется координатор (секретарь), который отвечает за взаимодействие арбитров по данному иску и за своевременное принятие решения.
3. На предложение первого проекта решения по иску арбитрам отводится не боле трёх недель с момента принятия иска.
4. Внутренний регламент французского АК допускает открытое обсуждение иска арбитрами, но не обязывает его.

Отличительными особенностями внутреннего регламента английского АК являются два момента.

1. Отдельное голосование арбитров по каждому тезису решения. Это связано с тем, что в условиях 15 арбитров, все из которых принимают участие в рассмотрении иска, выработать единое консенсусное решение за приемлемое время практически невозможно.
2. Деление решения на четыре составные части: общие принципы (принципы Википедии, которые были использованы АК при рассмотрении данного иска), анализ ситуации, выводы и постановления. Кроме того, к каждому иску прилагается также журнал действий, который заполняется в соответствии с административными действиями по отношению к сторонам иска.

Отдельного анализа заслуживает проблема открытого рассмотрения исков, когда основная часть обсуждения арбитрами иска проводится открыто на страницах Википедии. У этого механизма есть свои плюсы и минусы. Во-первых, это обеспечивает прозрачность рассмотрения иска, что делает Арбитражный комитет более естественной структурой для Википедии. Во-вторых, своими обсуждениями Арбитражный комитет демонстрирует сообществу практику успешного поиска консенсуса. В-третьих, даже в самом подробном решении невозможно учесть все аргументы и нюансы проблемы, которые раскрываются в процессе анализа иска, и открытое обсуждение позволяет сообществу лучше понять проблему. В-четвёртых, при открытом обсуждении видны роль и активность каждого арбитра. К основному минусу можно отнести неизбежное замедление рассмотрения иска из-за того, что арбитрам приходится более тщательно продумывать формулировки высказываний и тратить дополнительное время на понимание мыслей других арбитров. В основном это касается исков, связанных с персональными конфликтами.

В итоге можно сказать, что открытое обсуждение желательно для исков, связанных с трактовкой правил, очень неудобно для исков, связанных с персональными конфликтами, и совершенно невозможно для исков, требующих приватности.

Активность и арбитрооборот

Важное отличие работы арбитра от множества других функций участников Википедии заключается в том, что в то время как работа в Википедии является волонтёрской, работа арбитра является обязательной. Участник Википедии может не делать правок, администратор может не администрировать, патрулирующий может не патрулировать — за него это сделают другие. Но арбитр не может надеяться на других — он обязан весь свой срок рассматривать иски, не перекладывая свою часть работы на коллег. При текущей загрузке АК качественная работа арбитра требует для себя не менее 4 часов в сутки, а желательно около 6 часов.

Такая обязательность работы в сочетании с её характером (многие иски связаны с разбором конфликтов) естественным образом приводит к накапливанию у арбитров усталости — как физической, так и эмоциональной. По собственному опыту автор может сказать, что где-то на третий месяц арбитр начинает волком смотреть на сообщество, которое не может самостоятельно разрешить свои конфликты. Этот срок вполне согласуется с параметрами кривой активности арбитражной рассылки (рисунок 2). Следствием такой усталости являются вики-отпуска, добровольное снятие флагов или вообще уход арбитров (и бывших арбитров) из проекта.

Рисунок 3. Количество активных членов АК русского раздела Википедии по месяцам

На рисунке 3 изображена временная зависимость числа активных арбитров. Арбитр здесь условно считается активным, если он отправил за месяц более 10 писем в арбитражную рассылку. Как видно на графике, Арбитражный комитет значительную часть времени проводит в неполном составе. Как показывает практика, четырёх активных арбитров обычно достаточно для своевременного решения исков. Когда число активных арбитров уменьшается до трёх и менее, Арбитражный комитет становится практически неработоспособным. Впрочем, систематической такая ситуация являлась только для АК-3.

Рисунок 4. Оперативность рассмотрения исков Арбитражным комитетом русского раздела Википедии

Интересно соотнести этот график с графиком на рисунке 4, который характеризует «среднюю ожидаемую продолжительность жизни» иска. На этом рисунке синим цветом обозначены иски, по которым за прошедшие полмесяца принято решение, а оранжевым — иски, остающиеся открытыми к моменту окончания полумесячного интервала. При этом отклонённые и отозванные (к данному моменту или в будущем) иски не учитывались. «Средняя ожидаемая продолжительность жизни» принятого иска в данный момент при наличии достаточной статистики могла бы быть вычислена как отношение числа открытых (оранжевых) исков к числу закрытых (синих). К сожалению, статистически малое количество исков не позволяет этой величине быть достаточно удобной. Как видно из графика, в практике АК-5 был момент, когда все иски оказались закрыты; а наибольшее количество открытых исков (до 32) было летом 2007 года.

Чтобы понять, как можно повысить оперативность работы Арбитражного комитета и тем самым избежать подобного накопления исков, следует обратиться к опыту других разделов. Как следует из таблицы 3, арбитражные комитеты разных разделов различаются не только числом арбитров и сроком их полномочий, но и количеством траншей. Обращает на себя внимание, что из всех активных арбитражных комитетов (английский, французский, русский, немецкий, испанский, польский, нидерландский) наименьшее количество арбитров имеется в АК русского раздела — 5 человек; только русский и испанский разделы используют однотраншевую систему, при которой состав АК после очередных выборов сменяется целиком. Особняком стоит АК самого крупного — английского — раздела, состоящий из 15 арбитров и использующий три транша, причём срок полномочий арбитра английского АК составляет целых 3 года. Все остальные активные арбитражные комитеты (французский, немецкий, польский и нидерландский) похожи друг на друга: двухтраншевая система с годичным сроком полномочий арбитра (соответственно, выборы раз в полгода), причём число арбитров составляет от 7 до 10.

Раздел	Язык	Число арбитров		Число траншей	Длит. транша	Интервал между выборами
		Всего	В транше
cs	чешский	5*	5*	1	18	18
de	немецкий	10	5	2	12	6
en	английский	15	5	3	36	12
es	испанский	7	7	1	6	6
fi	финский	10	5	2	24	12
fr	французский	10	5	2	12	6
hu	венгерский	10
nl	нидерландский	7	4/3	2	12	6
pl	польский	9	5/4	2	12	6
ru	русский	5	5	1	6	6
sv	шведский	9	3	3	18	6
uk	украинский	5	5	1	12	12
Таблица 3. Арбитрооборот в разных разделах

Число арбитров в АК существенным образом влияет на процесс принятия решений. В случае малого числа арбитров падает качество принимаемых решений; кроме того, возрастает роль незаменимость каждого арбитра, так как участие каждого арбитра в общей работе АК становится критически важным. При большом числе арбитров сложно искать консенсус, и некоторые арбитражные комитеты выработали свои оригинальные механизмы решения этой проблемы: как уже упоминалось, арбитры английского АК голосуют не за решение целиком, а за отдельные тезисы, во французском же АК решение по конкретному иску принимают не все 10 арбитров, а только 5.

Многотраншевая система обладает рядом существенных преимуществ по сравнению с однотраншевой. В первую очередь она естественным образом обеспечивает преемственность и простоту передачи дел между составами АК, устраняя тем самым мёртвое время. Кроме того, многотраншевая система, сочетаясь с бо́льшим числом арбитров по сравнению с однотраншевой, позволяет арбитрам при необходимости уходить в вики-отпуск. В то же время необходимо заметить, что сама по себе многотраншевая система не обеспечивает уменьшение суммарной нагрузки на отдельного арбитра: увеличение количества арбитров компенсируется пропорциональным увеличением срока полномочий арбитра; таким образом, суммарная нагрузка определяется только количеством арбитров в транше и интервалом между выборами.

Ещё одним способом повышения оперативности работы АК является механизм резервных арбитров, активно использующийся, в частности, во французском разделе. При этом на очередных выборах избираются не только основные, но и резервные арбитры, готовые заменить основных арбитров в случае их вики-отпуска или отказа работать в АК. Практика АК нашего раздела также свидетельствует, что механизм резервных арбитров был бы весьма полезен для него (отдельные арбитры выбывали на длительный срок и в АК-3, и в АК-4, и в АК-5, и в АК-6). К сожалению, этот механизм требует тщательной проработки внутреннего регламента АК, что пока не сделано. Тем не менее, существующая сейчас однотраншевая система без механизма резервных арбитров порождает очень существенную неустойчивость Арбитражного комитета к выбытию арбитров, и в ближайшее время необходимо реализовать один из альтернативных вариантов обеспечения такой устойчивости.

Оптимальным вариантом автору представляется нестандартная двухтраншевая система, в которой арбитры выбираются раз в полгода на год, но каждый транш работает независимо по два месяца. Таким образом, каждый арбитр по-прежнему работает 6 месяцев, но они становятся растянуты на год. Схема такой работы представлена в таблице 4. Двухмесячный срок предложен на основании анализа статистики, в том числе графика на рисунке 2, согласно которой арбитру после двух месяцев работы в АК требуется перерыв.

Состав АК	Месяцы
	12	1	2	3	4	5	6	7	8	9	10	11	12	1	2	3	4	5	6	7
1
2
3
4
5
6
	Легенда
	Активный состав										Пассивный состав
Таблица 4. Проект арбитрооборота

Степень усталости бывших арбитров от работы в АК может характеризовать параметр возвращаемости — доля избранных арбитров, которые уже имели опыт работы в АК. Характерно, что значение этого параметра для русского раздела не очень существенно отличается от значения для большинства других разделов с активным АК, как видно из таблицы 5, и составляет примерно 0,5.

Номер выборов	ru			fr			es			nl			de
	всего	до	после	всего	до	после	всего	до	после	всего	до	после	всего	до	после
1	5		4	7		3	7		3	7		2	10		4
2	5	2	3	7	4	3	7	1	2	3	1	1	5	2
3	5	1	1	7	0	3	7	2	1	4	1		5	2
4	5	3	2	3	1	1	7	3		3	2
5	5	2	1	7	3	1
6	5	3		7	2	4
7				5	2	1
8				5	2
9				5	3
Таблица 5. Возвращаемость арбитров

Выборы АК

Выборы Арбитражного комитета, как и многое другое, связанное с АК, также имеют свою отличительную особенность. Если все остальные обсуждения в Википедии являются (или должны являться) именно обсуждениями, а не голосованиями, то выборы в АК принципиально являются голосованием. Это связано в первую очередь с тем, что для подведения итогов обсуждения должен быть кто-то, кто может подводить соответствующий итог. Поскольку АК фактически является высшим органом русского раздела Википедии, подводить итог обсуждения некому. Следует заметить, что в английском разделе это не так — там итог подводит Джимбо, и формально голосование только помогает ему подвести этот итог.

Тем не менее обсуждение кандидатур на выборах АК существует, и одна из ближайших задач русского раздела — повысить роль обсуждения. Не секрет, что многие участники не читают ответов кандидатов на вопросы, а голосуют по принципу: «Этот мне ответил на вопрос — за; этот меня заблокировал — против; за этого проголосовал человек, которого я знаю — за». Как заставить избирателей внимательно читать обсуждение кандидатов, прежде чем голосовать за них, и можно ли вообще это сделать — вот одна из основных проблем выборов АК в русском разделе.

Конечно, избирателю важно не только прочитать обсуждение кандидата, но и понять, сможет ли он выполнять работу арбитра. Очевидно, для любого кандидата совершенно необходимы умение логически мыслить и работать в коллективе, что включает в себя способность понимать аргументы собеседника и корректировать своё мнение, сближая его с чужим. Но есть также несколько дополнительных важных факторов, которые необходимо оценить.

1. Наличие у кандидата времени (4—6 часов в день) на работу в АК.
2. Психологическая и физическая выносливость кандидата, который должен проработать в АК без перерыва 6 месяцев.
3. Умение абстрагироваться от личных интересов. Каждый участник, работая в Википедии, тем самым уже частично абстрагируется от личных предпочтений и принимает Википедию такой, какая она есть. Арбитр должен абстрагироваться ещё сильнее, опираясь не на свои представления и интересы, а исключительно на правила и интересы сообщества.
4. Совместимость команды. Как бы хорош ни был арбитр сам по себе, ему предстоит работать в команде. Мешать такой работе могут не только принципиальное неумение работать в команде, но и личная несовместимость — например, несовпадение времени реакции с другими арбитрами, из-за чего арбитр может фактически выпасть из работы АК. Кроме того, если все арбитры будут специализироваться только на одном типе исков (например, на межличностных конфликтах), то другие иски (в данном случае — о трактовке правил) будут оставаться нерассмотренными.

Исходя из этого я предложил бы рассмотреть возможность следующих изменений системы выборов арбитров.

1. Как известно, Совет поверенных ввёл 4 экспертных места, на которые он сам назначает людей в соответствии с собственными потребностями. Аналогичную систему можно рассмотреть и в АК, когда бо́льшая часть Арбитражного комитета выбирается сообществом напрямую, а меньшая часть назначается предыдущим составом АК из числа кандидатов, прошедших определённый барьер на выборах (но во избежание конфликта интересов не входящих в предыдущий состав АК). Это связано с тем, что арбитры, имеющие опыт работы, могут обоснованно предполагать, кто из дополнительных кандидатов окажется полезен при выбранном составе АК.
2. Можно рассмотреть вариант выбора не индивидуальных арбитров, а целых команд. Это решит проблему совместимости команды, поскольку участники сразу идут на выборы в согласованных командах, но может сильно усложнить сам процесс выборов.

Заключение

В заключение следует рассмотреть перспективы изменения роли АК. Как хорошо видно из рисунка 1, во многих разделах (английском, французском, отчасти немецком и русском) наблюдается тенденция к уменьшению числа исков. Автор склонен считать это естественным явлением, связанным с развитием доарбитражных способов разрешения конфликтов: более подробной разработкой системы правил и появлением дополнительных механизмов. В русском разделе помимо этого наблюдается общая существенная перегрузка Арбитражного комитета, что в случае сохранения текущей схемы работы АК неизбежно приведёт к тому, что участники, способные работать в АК, перестанут в него выдвигаться. Снижение качества решений в результате этого с необходимостью вызовет развитие доарбитражных методов разрешения конфликтов и снижение роли Арбитражного комитета.

Дополнительные материалы

Рисунок 5. Средняя ожидаемая продолжительность жизни иска, который будет принят Арбитражным комитетом русского раздела Википедии (в месяцах)

В связи с недостатком статистики невозможно эффективно вычислить среднюю ожидаемую продолжительность жизни иска как отношение числа остающихся исков к числу решённых, умноженное на соответствующий интервал времени. В связи с этим величина, изображённая на данном графике (рисунок 5), является отношением соответствующих средних арифметических величин, показанных на рисунке 4, за последние 3 месяца, умноженным на полумесячный интервал.

Фото

Участник Divot задаёт вопрос докладчику.