V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
weishao666
V2EX  ›  机器学习

大模型底下的踩和赞是如何进一步影响到大模型的

  •  1
     
  •   weishao666 · 194 天前 · 794 次点击
    这是一个创建于 194 天前的主题,其中的信息可能已经有所发展或是发生改变。

    大模型了解的比较模糊,主流的大模型平台对话框底下的踩和赞应该就是 RLHF 的前置步骤,即数据的收集,收集了之后一般是怎么影响到模型的呢,是不是还要隔一段时间将数据处理成指令数据集的格式,进行一轮微调?

    2 条回复    2024-05-08 10:19:12 +08:00
    laimailai
        1
    laimailai  
       194 天前
    隔一段时间将数据处理成指令数据集的格式,进行一轮微调。
    ------
    正解!还需要进行一轮数据清洗过滤。
    weishao666
        2
    weishao666  
    OP
       193 天前
    @laimailai 谢谢!
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   5651 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 23ms · UTC 01:39 · PVG 09:39 · LAX 17:39 · JFK 20:39
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.