Java知识分享网 - 轻松学习从此开始!    

Java知识分享网

Java1234官方群25:java1234官方群17
Java1234官方群25:838462530
        
SpringBoot+SpringSecurity+Vue+ElementPlus权限系统实战课程 震撼发布        

最新Java全栈就业实战课程(免费)

springcloud分布式电商秒杀实战课程

IDEA永久激活

66套java实战课程无套路领取

锋哥开始收Java学员啦!

Python学习路线图

锋哥开始收Java学员啦!
当前位置: 主页 > Java文档 > 人工智能AI >

大模型(LLMs)强化学习—— PPO 面 PDF 下载


分享到:
时间:2025-04-21 09:51来源:http://www.java1234.com 作者:转载  侵权举报
大模型(LLMs)强化学习—— PPO 面
失效链接处理
大模型(LLMs)强化学习—— PPO 面 PDF 下载

 
 
相关截图:
 


主要内容:

一、大语言模型RLHF中的PPO主要分哪些步骤?
大语言模型RLHF中的PPO 分为:
对应的实现逻辑如下:

 

二、举例描述一下 大语言模型的RLHF
大语言模型的RLHF,实际上是模型先试错再学习的过程
大语言模型的RLHF 好比是:老师与学生的角色
 
• 我们扮演着老师的角色,给出有趣的问题。模型则会像小学生一样,不断尝试给出答案。
• 模型会根据我们给出的问题,写出它觉得正确的答案,但是这些答案不一定是真的答案,需要我们结合正确
答案进行打分。如果它表现得好,就会给予它高声赞扬;如果它表现不佳,我们则会给予它耐心的指导和反
馈,帮助它不断改进,直到达到令人满意的水平。
 


 

------分隔线----------------------------

锋哥公众号


锋哥微信


关注公众号
【Java资料站】
回复 666
获取 
66套java
从菜鸡到大神
项目实战课程

锋哥推荐