Википедия:Оценка/О проекте

Вики-оценки (англ. Wiki Labels) — название набора программного обеспечения википроекта. Собственно проект занимается сбором оценённых элементов (это могут быть правки, отдельные версии страниц и т. п.), а одноименное программное обеспечение призвано систематизировать и ускорить эту работу. Слово вики-оценка может также означать как суть работы:

Мы работаем вместе, проставляя вики-оценки.

так и сам процесс:

Чтобы собрать необходимые данные, мы проводим вики-оценку качества правок.

Нашей целью является сбор массивов оцененных данных для дальнейшей помощи сообществу в решении ресурсоёмких задач. Собранные данные найдут свое применение в исследованиях (например, анализ вклада новичков^[1] и взаимодействия редакторов^[2]) и разработке продвинутого инструментария (например, моделей, используемых в работе ClueBot NG и STiki. Обычно сбор достаточного объёма данных требует значительных затрат времени и усилий от небольшой группы людей, которой приходится обрабатывать данные вручную.

Мы нацелены на: (1) постоянный поиск возможностей для создания наборов важных оцененных данных; (2) как можно более широкое распределение работы; (3) обеспечение быстрого и эффективного ручного оценивания данных. Просмотрите наш список кампаний, чтобы узнать, чем именно мы сейчас занимаемся. Если хотите помочь, запишитесь в список участников. Если у Вас есть собственные идеи или предложения по созданию наборов оцениваемых данных, напишите нам на страницу обсуждения с указанием языка.

Есть несколько способов принять участие в проекте:

Оценивание

Основа проекта — оценка составляющих Википедии. В ходе проведения кампаний вручную обрабатываются огромные объёмы данных. Конечно, мы стараемся сделать их мониторинг как можно более удобным для волонтеров и автоматизировать всё, что не касается собственно выставления оценок. Если вы хотите помочь с оценкой, добавьте себя в список участников.

Программирование

Поиск и исправление ошибок в коде, разработка нового функционала и повышения производительности системы. Pull request’ы приветствуются! См. наш репозиторий.

Администрирование

Проведение кампаний, отчётности о найденных ошибках и помощь новичкам проекта в работе над оценкой. Если заинтересовались — пишите とある白い猫  (англ.).

Многие мощные википедийные инструменты полагаются на машинную классификацию качества правок. В этом проекте мы будем создавать систему API-запросов для машинной оценки версий. Мы убеждены, что внедрение такого сервиса сделает намного более лёгким создание новых сильных викиинструментов и поможет уже существующим эксплуатироваться в более широком круге википроектов. Для того, чтобы создать мощные машинные классификаторы, нам нужно начать с высококачественной оценки данных. Именно этим займется проект Вики-оценки. См. ВП:Оценка/Качество правок.

Основным способом использования этого инструмента через веб-службу и оценочную систему, называемую нами ORES (Objective revision evaluation service). ORES является веб-сервисом, которые по запросу может автоматически оценивать правки. К примеру, http://ores.wmflabs.org/scores/enwiki?revids=34854258&models=reverted запрашивает оценку модели «отмены» для версии #34854258 в англоязычном разделе Википедии.