Хороший эталон начинается с разбора неоднозначности

Разделите намерение, причину и эмоциональный тон. Они отвечают на разные вопросы и могут сочетаться независимо. Сильный негатив не сообщает причину возврата. В инструкции приведите пограничные примеры и допустимое пустое значение. Тогда разметчик не будет придумывать факт ради обязательной категории.

Отсутствующее поле должно иметь явное представление. Эталон с подставленной датой учит модель угадывать, даже если реальный процесс требует уточнения. Различайте отсутствие, неразборчивость и конфликт. Это разные основания для следующего действия, которые нельзя свести к одной случайно заполненной строке.

Для совместимости используйте три состояния: подтверждено, опровергнуто, неизвестно. Положительной связи нужен источник, отрицательной — подтвержденное противоречие. Внешняя похожесть не дает ни того, ни другого. Такая схема не делает набор слабее: она точнее описывает доступное знание о паре.

Разметочная инструкция должна различать отсутствие сведения, нечитаемый фрагмент и противоречащие источники. У этих состояний разные следующие действия, поэтому одной пустой ячейки часто недостаточно. Добавьте примеры каждого состояния и правило пересмотра после уточнения. Если новый источник снимает неопределенность, создайте обновленную версию эталона, сохранив основание изменения. Тогда качество системы можно оценить относительно доступных ей данных, а не знания разметчика задним числом.

Сохраните спорный пример вместе с принятым основанием. Он помогает следующему разметчику понять границу категории точнее общего определения.