Партия пришла — и вот здесь начинается работа, которую чаще всего пропускают.
Приёмка не равна беглому просмотру нескольких единиц. Это отдельная процедура с заранее оговорёнными правилами: сколько единиц смотрим, что считаем ошибкой, при какой доле ошибок партия возвращается целиком.
Что стоит проверять помимо содержания:
— полноту: все ли единицы размечены, нет ли пропусков и дублей;
— формат: одинаковые ли имена категорий, нет ли лишних пробелов и опечаток в значениях;
— распределение: если один класс внезапно стал редким или частым, это чаще всего не данные изменились, а инструкцию поняли иначе;
— время выполнения: аномально быстрые единицы почти всегда размечены не глядя.
Возврат партии — нормальная часть процесса, если критерии были известны заранее. Ненормально другое: принять, промолчать и переделать своими силами. Подрядчик не узнает об ошибке и повторит её в следующий раз.
И полезная привычка: смотреть не только ошибочные единицы, но и те, что размечены слишком одинаково. Однообразие — тоже симптом.
Разметка Данных
@data_labeling_ru_n1k
Партия пришла — и вот здесь начинается работа, которую чаще всего пропускают.
Этот пост опубликован в Telegram-канале Разметка Данных. Подписаться можно по ссылке: @data_labeling_ru_n1k.