Proof of Quality позволяет масштабировать процессы оценки ИИ
Краткое содержание
Sapien представляет Proof of Quality — рабочий процесс, объединяющий нескольких ИИ-рецензентов, чтобы команды могли сравнивать оценки, аргументацию, совпадения и расхождения. Это помогает проверять оценивание в большом масштабе и при этом оставлять экспертам неоднозначные случаи и случаи с серьёзными последствиями.
Системы ИИ могут создавать тысячи результатов, прежде чем команда успеет проверить хотя бы малую их часть. Если поручить эту задачу ИИ, одна из самых сложных проблем — решить, насколько можно доверять единственному суждению.
Proof of Quality позволяет использовать нескольких ИИ-рецензентов в рамках одного рабочего процесса, чтобы команды могли сравнивать оценки, аргументацию, совпадения и расхождения. Так можно быстрее проверять процессы оценивания в большом масштабе, оставляя экспертам неоднозначные случаи и случаи с серьёзными последствиями.
Подробнее: https://www.sapien.io/blog/proof-of-quality-works-with-ai-and-human-validators
