来自今天的爱可可AI生活前沿推介

[CL] ClimaBench: A Benchmark Dataset For Climate Change Text Understanding in English

T Laud, D Spokoyny, T Corringham, T Berg-Kirkpatrick
[UCSD & CMU]

ClimaBench: 面向气候变化(英文)文本理解的基准数据集

要点:

  1. ClimaBench 是一个用于评估模型在气候变化相关自然语言理解(NLU)任务上表现的基准集合；
  2. 通过发布两个大规模标记文本分类和问答数据集来增强这一基准；
  3. 分析评估了几种通用和气候变化相关模型在基准上的表现，研究了领域文本微调是否能提高在气候变化相关NLU任务上的性能。

一句话总结:
提供了一个新的基准数据集ClimaBench，让NLP社区可以评估语言模型在气候变化领域的表现。该数据集不仅包括现有数据集，还包括新的大规模标记数据集和对模型性能的详细评估结果。

论文链接：https://arxiv.org/abs/2301.04253
图片
图片
图片