TreeMind树图在线AI思维导图
当前位置:树图思维导图模板生活娱乐生活知识ChatGPT/GPT的核心原理思维导图

ChatGPT/GPT的核心原理思维导图

  收藏
  分享
免费下载
免费使用文件
龙龙哥 浏览量:202023-02-14 17:06:05
已被使用2次
查看详情ChatGPT/GPT的核心原理思维导图

ChatGPT/GPT的核心原理

树图思维导图提供 ChatGPT/GPT的核心原理 在线思维导图免费制作,点击“编辑”按钮,可对 ChatGPT/GPT的核心原理  进行在线思维导图编辑,本思维导图属于思维导图模板主题,文件编号是:51efc1b0b83349bcb4c2996d714d8bb7

思维导图大纲

ChatGPT/GPT的核心原理思维导图模板大纲

NLP

NLP/NLU领域已知局限包括对重复文本、对高度专业的主题的误解,以及对上下文短语的误解。

对于人类或AI,通常需接受多年的训练才能正常对话

NLP类模型不仅要理解单词的含义,还要理解如何造句和给出上下文有意义的回答,甚至使用合适的俚语和专业词汇。

NLP技术的应用领域

本质上,作为ChatGPT基础的GPT-3或GPT-3.5 是一个超大的统计语言模型或顺序文本预测模型。

GPT v.s.BERT

与BERT模型类似,ChatGPT或GPT-3.5都是根据输入语句,根据语言/语料概率来自动生成回答的每一个字(词语)

从数学或从机器学习的角度来看,语言模型是对词语序列的概率相关性分布的建模

即利用已经说过的语句(语句可以视为数学中的向量)作为输入条件,预测下一个时刻不同语句甚至语言集合出现的概率分布

ChatGPT 使用来自人类反馈的强化学习进行训练,这种方法通过人类干预来增强机器学习以获得更好的效果

由于ChatGPT更强的性能和海量参数,它包含了更多的主题的数据,能够处理更多小众主题

在训练过程中,人类训练者扮演着用户和人工智能助手的角色,并通过近端策略优化算法进行微调

来源——百度科普

相关思维导图模板

学习回顾与规划思维导图

树图思维导图提供 学习回顾与规划 在线思维导图免费制作,点击“编辑”按钮,可对 学习回顾与规划  进行在线思维导图编辑,本思维导图属于思维导图模板主题,文件编号是:5334fe5a080528ab6e52747e4173af1c

网络营销思维导图

树图思维导图提供 网络营销 在线思维导图免费制作,点击“编辑”按钮,可对 网络营销  进行在线思维导图编辑,本思维导图属于思维导图模板主题,文件编号是:5b5efdb68b9cc051f54d612f12c626c0