超腾开源博客 - 第23页 | 了解网站最新动态,分享最新技术
本文提供了三道用于测试大模型数学能力的题目,涉及几何、代数及单位换算。题目一为弹跳距离问题,要求根据三次弹跳的比例关系和总距离求首次弹跳的距离;题目二为水果等值换算,通过苹果、梨、橙子、香蕉的兑换关系,计算56个香蕉相当于多少个苹果;题目三为几何表面积计算,已知三棱柱上下底为等腰直角三角形,棱柱高等于斜边,求其表面积。
652
0
创建于2024年6月21日
这篇文章介绍了判断大语言模型水平高低的多种实用方法。首先,可以通过跨语言提问测试其多语言理解和信息一致性。其次,围绕同一主题连续提问可检验模型的上下文理解与逻辑自洽。此外,包含类比和推理的问题能评估其逻辑推断能力,而代码生成与理解任务则考察其对问题的解读。多模态输入测试跨媒体理解,创作类问题检验创造力,情感识别则体现情感理解能力。另一方面,故意制造陷阱可测试错误辨识能力,推理题评估“智商”,选择题检验公平性,润色文字测试表达能力,专业问题则考察垂直领域知识。综合运用这些方法,可以全面评估模型的综合水平。
719
0
创建于2024年6月21日
这篇文章总结了19个用于测试大模型能力的易错问题,分为多步逻辑推理和概念间接关联两类。逻辑推理类问题考察模型对数字关系、平均智商变化、水分含量变化、日期推断、过河难题、代数运算及物理运动等复杂情境的推理准确性,其中一些问题通过调整参数(如蜘蛛腿数量改为青蛙腿或美国州数)或语言变体(如数字表达)来误导模型。概念关联类问题则测试模型对看似无关事物(如香蕉与呕吐、佛罗里达与皱纹)之间隐藏联系的理解能力。这些题目旨在揭示大模型在逻辑连贯性与常识推理上的弱点。
702
0
创建于2024年6月21日
本文提供了一套用于测试AI大模型能力的考题,涵盖语言理解、逻辑推理、常识判断等多个领域。题目包括中文谦辞“哪里哪里”的含义、成语使用正误、双胞胎家庭孩子数量推论、根据天气预报推算星期几、名著常识判断、搬运花瓶破损数量的数学计算、天文学与物理学的错误选项辨别,以及一篇关于周末计划的英语阅读理解。这些题目旨在评估大模型在自然语言处理、逻辑推理和知识应用方面的表现。
1135
0
创建于2024年6月21日
月之暗面(Moonshot AI)是一家中国人工智能初创公司,专注于通用人工智能(AGI)研发,其名称源于Pink Floyd的专辑《The Dark Side of the Moon》。该公司核心产品为Kimi智能助手(Kimi Chat),面向普通用户。文章整理了Kimi的相关常用地址,包括官网、在线聊天、会员订阅方案,以及编程工具Kimi Code及其文档,此外还介绍了Kimi API开放平台、API文档和控制台等资源链接。
1276
0
创建于2024年6月21日