ChatGPT的起点,一篇经典传世的论文— Attention is All You Need

2025-04-17 来源|AI图库吧

AI奇点网6月25日报道 | 在大规模AI语言模型研究的浪潮中,"Attention is All You Need"这篇经典论文被认为是一股重要的推动力。它推崇了Transformer架构,但却未在NeurIPS 2017上获得任何奖项。然而,这并不意味着论文的价值被低估,高质量的研究成果通常会在合适的时机发挥其影响力。

Transformer论文共有八位共同作者,其中四位创办了正在研发类ChatGPT产品的AI独角兽企业。他们分别是艾丹·戈麦斯(Aidan Gomez)、诺姆·沙泽尔(Noam Shazeer)、阿希什·瓦斯瓦尼(Ashish Vaswani)和尼基·帕玛(Niki Parmar)。这些创业者离开了谷歌,各自以不同的方式应用AI技术,追求影响普通用户并实现技术落地的目标。

其中,艾丹·戈麦斯于2019年创办了加拿大AI初创公司Cohere。该公司仅在成立一年的时间里就展现出强大的吸引力,吸引了李飞飞、Geoffrey Hinton和吴恩达等知名人士的投资。戈麦斯独特的魅力和果断自信赢得了众多投资者的支持。Cohere专注于为开发者和企业提供定制的大型语言模型服务,帮助用户创建针对特定场景和独有数据的大模型。大型企业如甲骨文已经与Cohere展开合作,共同推动AI技术在各个行业的应用。

与其他创业者不同,戈麦斯并不打算将自研的类ChatGPT模型用于无限制的免费使用,而是致力于建立健康和可持续的业务模式。Cohere提供多种数据托管选项,包括私有云、本地部署和Cohere托管云,确保客户对数据拥有控制权。

尽管获奖是一种认可,但它并不是衡量研究成果成功与否的唯一标准。Transformer论文作者们通过创业,将AI技术应用于实际场景,为用户带来创新和影响。他们的创业故事鼓励着更多的研究者将科学成果转化为实际应用,推动科技进步和社会发展。

在AI领域,Transformer论文的影响力不仅仅体现在学术界,更通过创业落地产生了实际的商业价值。这个过程证明了论文的价值并鼓励了创新者将研究成果应用于实际情境,为社会带来积极的变革。

最新
更多

ChatGPT的起点,一篇经典传世的论文— Attention is All You Need

本文将介绍神经网络架构Transformer的经典论文《Attention is All You Need》及其作者的创业经历。尽管该论文在NeurIPS 2017上未获奖,但其影响力逐渐显现。其中的四位共同作者创办了AI独角兽企业,包括Cohere、Character AI、Adept AI和Essential AI。

上海交通大学发布 AI 使用规范:学生应坚持人工智能辅助学习的价值定位

今日上海交通大学发布 AI 使用最新规范,其中明确:学生应坚持人工智能辅助学习的价值定位,指出学生应了解并遵守各项课程的人工智能使用规范,若有相关违规行为,学校将追究相关责任;同时,教师应立足各项教育

人民日报发表对AGI见解:重视通用人工智能发展

与人“对话”、编写代码、创作诗歌、翻唱歌曲……如今,具备一定理解和自主学习能力的人工智能,可以完成一些以往被认为只有人类才能完成的工作。近期,深度学习、大模型等关键技术推动人工智能快速发展,引发社会关注。

美国空军研究ChatGPT在军事上的应用 | Dropbox推出AI搜索工具和文件预览服务 | 扎克伯格、奥特曼声援欧盟AI监管

【AI奇点网2023年6月26日早报】本站每日播报AI业界最新资讯,触摸时代脉搏,掌握未来科技动向。事不宜迟,点击查看今日AI资讯早餐。

赛车游戏《iRacing》引入自适应 AI:电脑对手难度可根据玩家水平动态调整

在赛车模拟领域,《iRacing》一直以其逼真的在线多人赛车体验而闻名,该游戏最近迎来了名为自适应人工智能(Adaptive AI)的技术,这项技术不仅可以为资深赛车手提供更具挑战性的对手,也能为初学者提供更个性化

谷歌展示deepmind团队成果:超级大脑智能体机器人RoboCat能够快速学习和适应多任务,实现自我升级

DeepMind的RoboCat机器人智能体是全球首个能够解决和适应多重任务的AI智能体。通过结合语言模型理解和辅助机器人的现实世界能力,RoboCat能够在不同的机械臂上学习并执行各种任务,并通过自动生成的训练数据来不断改进。

网站地图