[Feature] Support QuALITY dataset
Ezra-Yu opened this issue · comments
Ezra-Yu commented
描述该功能
在Claude3中加入了QuALITY: Question Answering with Long Input Texts, Yes!”这个长文测试集(平均5k token),是一个人工标注且质量比较高的测试集,希望支持
Arxiv : https://arxiv.org/abs/2112.08608
Github: https://github.com/nyu-mll/quality
是否希望自己实现该功能?
- 我希望自己来实现这一功能,并向 OpenCompass 贡献代码!
Jingming Zhuo commented