Почему новые решения в области безопасности всегда остаются невостребованными? Говоря прямо, потому что отсутствует универсальный эталон.
Вы так трудно разработали новый метод оценки реального вреда AI, а в результате рецензент сразу спрашивает: «Как у вас с баллом TruthfulQA?»
«Подождите, мы вообще не тестируемся на TruthfulQA, это не имеет смысла для нашего подхода.»
«Нет стандартного эталона?»
И так инновационные решения остаются за дверью. Без признанных в индустрии стандартов оценки даже лучшие идеи не могут выйти за пределы лаборатории. Разве это не парадокс академической публикации — чтобы опубликовать работу, нужно подтвердить её существующими стандартами, но эти стандарты часто ограничивают пространство для прорывных инноваций.
Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
15 Лайков
Награда
15
6
Репост
Поделиться
комментарий
0/400
SilentObserver
· 4ч назад
Это действительно порочный круг: если установить строгие стандарты, никто не сможет внедрять инновации; если убрать стандарты, скажут, что вы недостаточно строгий. Что думают рецензенты?
Улыбаюсь, разве это не повседневная жизнь проектов в криптомире? Белая книга написана красиво и красочно, а когда биржа спрашивает: "Где ваш отчет о код-ревью?", сразу происходит взрыв на месте
Посмотреть ОригиналОтветить0
ProbablyNothing
· 4ч назад
Вот почему вещи из Web3 так трудно принять традиционной академической средой — они цепляются за устаревшие метрики и не хотят их отпускать.
Посмотреть ОригиналОтветить0
BitcoinDaddy
· 4ч назад
Боже, это проблема системы, стражи ворот контролируют власть, и все инновации застряли.
Посмотреть ОригиналОтветить0
AirdropHunter007
· 4ч назад
Опять эта старая игра: стандартизированная проверка убивает инновации, типичный внутренний конкурс академической экспертизы
Почему новые решения в области безопасности всегда остаются невостребованными? Говоря прямо, потому что отсутствует универсальный эталон.
Вы так трудно разработали новый метод оценки реального вреда AI, а в результате рецензент сразу спрашивает: «Как у вас с баллом TruthfulQA?»
«Подождите, мы вообще не тестируемся на TruthfulQA, это не имеет смысла для нашего подхода.»
«Нет стандартного эталона?»
И так инновационные решения остаются за дверью. Без признанных в индустрии стандартов оценки даже лучшие идеи не могут выйти за пределы лаборатории. Разве это не парадокс академической публикации — чтобы опубликовать работу, нужно подтвердить её существующими стандартами, но эти стандарты часто ограничивают пространство для прорывных инноваций.