IBM 入局:开源自对齐方法训练「单峰骆驼」,比GPT4更值得信赖(2)

IBM 入局:开源自对齐方法训练「单峰骆驼」,比GPT4更值得信赖(2)

Dromedary 大模型Dromedary 模型是将 SELF-ALIGN 过程应用于 LLaMA-65b 基础语言模型而得到的 AI 助理。下面谈谈创建 Dromedary 模型的细节。研究者首先依照 Alpaca 的方案,使用自提示生成了 267,597 个开放域的提示及对应的输入。此外,他们...

IBM 入局:开源自对齐方法训练「单峰骆驼」,比GPT4更值得信赖(1)

IBM 入局:开源自对齐方法训练「单峰骆驼」,比GPT4更值得信赖(1)

用最少的人类监督,从零实现原则驱动的大语言模型的自对齐,IBM 研究院淦创团队在这方面取得了新的成果。他们的结果表明,仅仅通过不到300行的人工标注,他们的方法(即SELF-ALIGN)便能让一个65B的LLaMA基础语言模型在TruthfulQA上超越GPT-4。大语言模型(LLM)...

IBM 取得内存计算新突破,AI 训练能耗降低 80 倍

IBM Research 称,已经开发出了一种内存计算新方法,可以为微软和谷歌寻求的高性能和机器学习应用的硬件加速器提供答案。 在近日 Nature Electronics 期刊上发表的一篇论文中,IBM 研究人员描述了这种新的 “混合精度内存计算” 方法。 IBM 关注传统计算体系结构的不同看法,...

IBM上线“深度学习即服务”项目,帮助开发者缩短AI训练时间

IBM正在帮助开发者进一步降低神经网络的训练难度。 今天,IBM宣布面向人工智能开发者推出全新的“深度学习即服务”项目,简称“DLaaS”。 据了解,该项目的每一个云计算处理单元都是遵循简单易用的原则而设置的,且开发者也不必对基础设置进行管理。基于该项目服务,开发者无需去购买售价和维护成本高昂的硬件...

IBM新思路,让无人机照看、训练你的宝贝萌宠

IBM申请了一项无人机专利,致力于让无人机给宠物当保姆和训练员。 近日,美国专利和商标局披露的文档显示,IBM申请了一项无人机专利,致力于让无人机给宠物当保姆和训练员,进行喂食、训练等行为,并阻止宠物趁主人不在家时的捣乱行为。 IBM在其专利申请的材料中表示,该无人机配备了各种传感器,包括可以探测到...

【测评】GPU训练机器学习模型哪家强?AWS、谷歌云、IBM等6大平台对比

随着越来越多的现代机器学习任务都需要使用GPU,了解不同GPU供应商的成本和性能trade-off变得至关重要。 初创公司Rare Technologies最近发布了一个超大规模机器学习基准,聚焦GPU,比较了几家受欢迎的硬件提供商,在机器学习成本、易用性、稳定性、可扩展性和性能等方面的性能。 在6...

IBM与八家高校联合训练沃森,旨在应对网络安全难题

IBM启动一项为期一年的研究项目,旨在推动沃森获得应对网络安全难题的能力——其beta部署工作计划于今年晚些时候进行。 IBM公司于本周二公布计划,表示其将与八家高校合作以训练沃森认知计算系统,旨在收集并理解安全相关数据。 该项目作为为期一年的沃森网络安全倡议的组成部分。这一合作规划将涵盖八家来自美...

IBM研究人员训练Watson识别技术 可防治青光眼疾病

IBM研究人员在墨尔本成功训练了一个Watson研究版,训练过的Watson可以识别视网膜图像的异常,因此可以帮助医生针对青光眼等眼疾的早期诊断,青光眼又名 “沉默的视力小偷”,许多患者往往直到视力已到了无可挽回的地步才确诊得了此病。 IBM研究人员从2015年开始利用应用深度学习和图像分析技术,通...

IBM秀出并行训练肌肉:256个GPU还能有95%的拓展效率,顺便刷新ImageNet-22K记录

雷锋网(公众号:雷锋网) AI 科技评论按:IBM 研究院上传了一篇论文到 arXiv,介绍了自己几乎能够达到理想性能的分布式深度学习软件,它不仅带来了优秀的沟通开销,让64台IBM服务器上的256个英伟达GPU发挥出了95%的拓展效率,训练时间和模型准确率也分别创下了新纪录。完成这项研究的团队负责...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

相关电子书
更多
IBM区块链之道
立即下载