原标题:IBM 入局大模型研究,可将任意大模型低成本变成类 ChatGPT 模型,如何解读?将带来哪些影响?
关键字:人工智能,科技,IBM,chat GPT
最佳回答:Jet
回答字数:1496字
又是一个断章取义 + 哗众取宠的文章。
以下来自IBM的官网,网址:Dromedary
官方说明:
Dromedary is trained in a way that discourages dangerous acts, or being offensive or discriminatory.
翻译一下:独角兽的训练方式是不鼓励危险行为,或攻击性或歧视性的。
也就是说:人家IBM是发布了一种对AI的产生内容进行无害化过滤的方法!
以下内容是对IBM这个产品更详细的技术说明,对技术不感兴趣的可以忽略了。
最近的人工智能助理代理,如ChatGPT,主要依靠人类注释的监督微调和人类反馈的强化学习来使大型语言模型(LLMs)的输出与人类的意图相一致,确保它们是有帮助的、道德的和可靠的。然而,由于获得人类监督的成本很高,以及质量、可靠性、多样性、自洽性和不良偏见等相关问题,这种依赖性会大大制约人工智能辅助代理的真正潜力。为了应对这些挑战,我们提出了一种名为SELF-ALIGN的新方法,它结合了原理驱动的推理和LLM的生成能力,以最小的人力监督实现人工智能代理的自我调整。
Dromedary是什么:在最小的人类监督下从头开始的语言模型的原则驱动的自我调整。它的实现步骤如下:
1、利用Self-Instruct生成合成指令,并通过基于主题的方法增强了多样性。
2、设计一套人工智能模型要遵守的原则,并为制作有用的、道德的、可靠的反应提供内涵学习示范。
3、通过修剪规则和演示对原始模型进行微调,使模型能够直接产生适当的反应。
4、采用上下文提炼法,比起过于简短或间接的回答,产生更全面、更详尽的回答。
项目完全开源,地址在此:GitHub – IBM/Dromedary: Dromedary is a helpful, ethical, reliable LLM.
最TM烦的就是这种不懂装懂还标题党的人。
联系作者
回答作者:Jet
公用,效用,实用