详细信息
 

ChatGPT有大规模语言模型自身的局限

编辑:      来源:哈尔滨工业大学自然语言处理研究所      时间:2023/3/31
 

身为大规模语言模型,ChatGPT 难免有 着 LLM 的通用局限,具体表现在以下几个方面:

1. 可信性无法保证:ChatGPT 的回复可能是在一本正经地胡说八道,语句通畅貌似合理,但其实完全大相径庭,目前模型还不能提供合理的 证据进行可信性的验证;

2. 时效性差:ChatGPT 无法实时地融入新知识,其知识范围局限于基础 大规模语言模型使用的预训练数据时间之前,可回答的知识范围有明显的边界;

3. 成本G昂:ChatGPT 基础大模型训练成本G、部署困难、每次调用花 费不菲、还可能有延迟问题,对工程能力有很G的要求;

4. 在特定的专业L域上表现欠佳:大规模语言模型的训练数据是通用数 据,没有L域专业数据,比如针对特定L域的专业术语翻译做的并不 好;

5. 语言模型每次的生成结果是 beam search 或者采样的产物,每次都会有细微的不同。同样地,ChatGPT 对输入敏感,对于某个指令可能回 答不正确,但稍微替换几个词表达同样的意思重新提问,又可以回答 正确,目前还不够稳定。


 
【声明:转载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述,文章内容仅供参考,如有侵权,请联系删除。】
 
推荐信息
ChatGPT相较于微调小模型的优点
通过大量指令激发的泛化能力在零样本和少样本场景下具有显著优势,在未 见过的任务上也可以有所表现,在微调小模型的范式下实现的泛化能力
ChatGPT相较于其它大规模语言模型的优点
ChatGPT 使用了更多的多轮对话数据进行指令微调,这使其拥有了建模对话历史的能 力,能持续和用户交互,基于人类反馈 的强化学习调整模型的输出偏好
ChatGPT相较于普通聊天机器人的优点
ChatGPT类似于市场上其他聊天机器人(微软小冰,百度度秘等),可与人类自然交互 简单直接;ChatGPT 的回答更准确, 答案更流畅,能进行更细致的推理,能完成更多的任务
ChatGPT 的未来技术发展方向
无法产生本应产生的正确回复; 对于输入措辞比较敏感;生成的回复通常过于冗长;其模型过于庞大使用成本过高;减少人类反馈信息的 RLAIF
ChatGPT 插件发布带来的十大关注点
定义大模型的toC平台商业模式;开放 API 标准;未来应用内又可反向嵌入 ChatGPT;知识更新问题被解决;很大程度解决准确性问题
ChatGPT的未来改进方向
ChatGPT虽然对话能力强,但是在数理计算对话中容易出现一本正经胡说八道的情况,ChatGPT很强大,但其模型大小和使用成本也让很多人望而却步
ChatGPT的局限有哪些
ChatGPT无法处理复杂冗长或者特别专业的语言结构;ChatGPT需要非常大量的算力;ChatGPT还没法在线的把新知识纳入其中;ChatGPT仍然是黑盒模型
ChatGPT的训练过程分为三个阶段
训练奖励模型通过人工标注训练数据 (约33K个数据) 来训练回报模型;采用PPO强化学习来优化策略将在线学习转化为离线学习靠奖励打分来更新预训练模型参数
智能运输机器人
AGV无人运输机器人-料箱版
AGV无人运输机器人-标准版
AGV无人运输机器人-料箱版(钣金材质)
AGV无人运输机器人-货架版(钣金材质)
AGV无人运输机器人-货架版(亮面不锈钢材质)
AGV无人运输机器人-开放版
行业动态
» AMR企业未来发展的建议:加强产学研合作 拓展应用领域与场景 突破关键技术
» 智能无人运输车AMR选型建议:安全性 稳定性 兼容性 成本和可维护性
» 物流企业自动化搬运项目:117台XPL搬运机器人用于快运件转运+物料暂存
» 工具制造业5G智慧工厂:10+台潜伏AGV+托盘式叉车用于线边仓转运
» 轮胎行业项目:2台室内平衡重式无人叉车LXP15-B用于半成品、成品自动化出入库
» 汽车零部件园区无人化物流项目:室外无人驾驶重载AGV用于车间到车间之间的物流运输
» 汽车行业智能搬运项目:30台XPL搬运机器人用于产线送料和成品转运
» 汽车新能源产线智慧物流项目-31台潜伏AGV应用环汽车总装车间转运
» 汽车行业多品类AGV整合项目:叉车AGV、潜伏牵引AGV、举升AGV、承载式双车联动AGV、功能型A
» 乘用车动力总成车间零部件集配项目-9台承载辊道式AMR,用于动力总成线边供给
 
首页    产品    方案    底盘    参数    关于
咨询热线:4006-935-088 / 4006-937-088     客服热线: 4008-128-728
版权所有 @ 创泽智能机器人集团股份有限公司    鲁ICP备18039973号-2    运营中心 / 北京·清华科技园九号楼    生产中心 / 山东省日照市开发区太原路71号