吉网

上海人工智能实验室葛佳烨:大模型评测亟需可靠的数据污染检测技术

导读 【上海人工智能实验室葛佳烨:大模型评测亟需可靠的数据污染检测技术】!!!今天受到全网的关注度非常高,那么具体的是什么情况呢,下面大家...

【上海人工智能实验室葛佳烨:大模型评测亟需可靠的数据污染检测技术】!!!今天受到全网的关注度非常高,那么具体的是什么情况呢,下面大家可以一起来看看具体都是怎么回事吧!

1、【上海人工智能实验室葛佳烨:大模型评测亟需可靠的数据污染检测技术】上海人工智能实验室司南大模型评测产品负责人葛佳烨表示,大语言模型评测中面临全面性、评测成本、数据污染、鲁棒性等挑战。

2、她表示,评测数十万道题需要大量算力资源,基于人工打分的主观评测成本高昂。

3、同时,海量语料不可避免带来评测集污染,亟需可靠的数据污染检测技术。

4、此外,大模型对提示词十分敏感,多次采样情况下模型性能不稳定。

以上就是关于【上海人工智能实验室葛佳烨:大模型评测亟需可靠的数据污染检测技术】的相关消息了,希望对大家有所帮助!