K-Sort Arena:视觉生成模型的高效人类偏好竞技场


青稞Talk 第三十四期

12月24日20点,青稞Talk 第34期,中国科学院自动化研究所博士生、新加坡国立大学访问博士生李志凯,将直播分享《K-Sort Arena:视觉生成模型的高效人类偏好竞技场》。

主讲嘉宾

李志凯,中国科学院自动化研究所博士生,新加坡国立大学访问博士生。研究方向为高效深度学习和模型压缩,以第一作者身份在ICCV、ECCV、TNNLS、PR等期刊会议上发表多篇论文。

主题提纲

K-Sort Arena:视觉生成模型的高效人类偏好竞技场

1、人类偏好评估概述
2、K-Sort Arena 解析

  • K-wise 比较
  • 概率建模与贝叶斯更新
  • 探索-利用的匹配算法

3、实验结果评估与排行榜构建

成果链接

Paper:K-Sort Arena: Efficient and Reliable Benchmarking for Generative Models via K-wise Human Preferences
Abs:https://arxiv.org/pdf/2408.14468
Hugging Face:https://huggingface.co/spaces/ksort/K-Sort-Arena

直播时间

2024年12月24日(周二)20:00 -21:00