Качество разметки задаёт не исполнитель, а инструкция. Это главный вывод, к которому приходит любой, кто хоть раз собирал набор данных руками.
Типичная история: заказчик отдаёт задачу с описанием в три строки, получает партию, смотрит и хватается за голову. Люди размечали не то. При этом они честно делали ровно то, что было написано.
Хорошая инструкция устроена не как определение, а как набор решений:
— что считать объектом, а что фоном;
— как быть, если объект виден частично или перекрыт;
— как поступать с сомнительными случаями: пропускать, помечать отдельно, звать старшего;
— примеры правильных ответов и, что важнее, примеры неправильных с пояснением, почему так нельзя.
Отдельная строка — про язык. Если в инструкции есть слово, которое два человека понимают по-разному, это слово рано или поздно даст расхождение в данных.
Инструкцию нельзя написать один раз. Она растёт вместе с проектом: каждый спорный случай, который разобрали в переписке, должен вернуться в текст. Иначе следующие исполнители наступят на те же грабли.
Правило простое: сначала маленькая пробная партия, разбор ошибок, доработка инструкции — и только потом объём. ⚙️
Разметка Данных
@data_labeling_ru_n1k
Качество разметки задаёт не исполнитель, а инструкция. Это главный вывод, к которому приходит любой, кто хоть
Этот пост опубликован в Telegram-канале Разметка Данных. Подписаться можно по ссылке: @data_labeling_ru_n1k.