首页 时事 民生 政务 教育 文化 科技 财富 体娱 健康 情感
更多
旅行 百科 职场 楼市 企业 乐活 学术 汽车 时尚 创业 美食 幽默 美体 文摘

对标Claude Artifacts！OpenAI canvas一夜封神！

科技   2024-10-06 19:21   浙江  
转自：新智元

时隔两年，ChatGPT终迎来界面全新升级！
这一次，OpenAI官宣推出canvas。它不再是简单的对话框，而是能与ChatGPT「并肩作战」的全新界面。
不论是写作，还是编码，都可以开启全新的合作方式。
canvas基于GPT-4o构建，目前仍在测试阶段，可在所有模型中手动选择。
而且所有Plus用户不用等待，直接可用。未来，OpenAI还计划向所有免费用户全面推出。
canvas不仅可以让你与ChatGPT一起做研究，还能写代码、邮件等等，最重要的是还能帮你一起脑洞。
有趣的是，canvas还可以添加emoji。奥特曼在线发起投票，看看有多少人喜欢这个功能。
另外，canvas面板中，还多了一个快捷菜单，让协作更加轻易便捷了。
审查代码、修改bug、添加评论、log等等，一键完成。
在Canvas界面助力下，GPT-4o编码性能飞跃18%！
这是要纷纷取代了GitHub Copilot、Cursor编码神器了。网友们惊叹道，OpenAI绝杀了Cursor。
还有人说，canvas的推出，是OpenAI对最大劲敌Anthorpic的Claude artifacts最大的回击。
在经历如此巨大人事变动同时，OpenAI近日多次发布更新，是向外界、投资者给出了我们依旧有实力的反馈。
话不多说，看看历经两年，ChatGPT究竟带了怎样划时代的巨变。

肝代码研究，原来这么轻松


canvas项目负责人Karina Nguyen表示，我对终极AGI界面的愿景，是一张空白的画布。
随着时间的推移，它会根据人类偏好，自我改进。
而且，它会创造与人类互动的新方式，重新定义人类与AI，以及整个互联网的联系。
canvas便是，这样一种终极AGI界面的完美「代言人」。
那么，它究竟如何帮人类研究、写代码、创作呢？
接下来，让我们一睹为快。

做研究


当你需要完成一项艺术史研究报告，在canvas便可以完成研究。
首先，将你的需求告诉ChatGPT，它便开始搜索一切所有相关的报道——Rembrandt的自画像技巧。
随之，canvas在屏幕右侧开启了全新界面，一篇研究报告，正在速成。
当你对其中生成的一句话，不太确定是否正确。只需要选中，然后即刻就能唤醒ChatGPT，随地取问。
又或者，当你想要更改文中的小标题，不如让ChatGPT给点建议。
最惊艳的是，右下角「铅笔」样子的图表，可以开启文献的阅读模式，可以一句一句地浏览。
最后，你可以让ChatGPT为你添加参考文献、书目引用。

写邮件


你还可以让ChatGPT搜索一家最好的餐厅，它会帮你汇总所有在SF城市米其林餐厅。
然后让它在为你写一封邮件，发给最好的朋友。

写代码


另外，你还可以在canvas界面中，完成代码的生成，还是可以编辑的那种。
以往ChatGPT只是给出结果，并不能一同编辑。
让ChatGPT用Rust写一API网络服务器，它便同以往一般，为你生成了代码。
然后，要求对其中一段代码，添加登录注册路由。
并且，你还可以自己改写其中的内容。
在界面右下角，还有一个工具栏，可以进行代码审查、转换语言、修改bug、添加log、还有添加评论功能。
比如，针对刚刚生成代码进行审查，以及修复bug，ChatGPT瞬间就完成了。

发明新食谱


更惊艳的是，在canvas模式下，还可以创造发明新的idea。
比如，你想做一个不一样的苹果派，可以让ChatGPT搜索总结出，最通用的苹果派的食谱。
假设你没有其中一种材料——Nutmeg（肉豆蔻），然后你们可以一同创作全新的做法。

与ChatGPT并肩作战


目前，ChatGPT已常被用于协助写作和编码方面的任务。
尽管聊天界面易于使用并且适用于许多任务，但对于需要编辑和修订的项目，仍然有些不便。
canvas的推出，正是要为这类工作提供新的界面，而且能让ChatGPT更好地理解用户提供的任务上下文。
当ChatGPT检测到可能有帮助的场景时，canvas会自动打开，也可以直接在提示词中包含「使用canvas」的字样来处理现有项目。
对于写作任务，快捷编辑栏中包含5种选项，从下至上依次为：
- 建议编辑：ChatGPT为指定内容提供内联建议和反馈
- 调整长度：将文字内容编辑得更短或更长
- 更改阅读级别：调整文字的阅读难度，从幼儿园到研究生院
- 最后润色：检查语法、清晰度和一致性
- 添加表情符号：为强调或有颜色标记的内容添加相关emoji符号
比如，可以高亮特定部分来引起ChatGPT的关注，并让模型在考虑整个项目的同时，提供内联反馈和建议。
奥特曼还发起了在线投票，「添加emoji是不是OpenAI有史以来发布的最好功能？」
对于编码任务，快捷键又和写作不同：
快捷键从下至上依次为：
- 检查代码：ChatGPT提供内联建议以改进代码
- 添加日志（logs）：插入print语句以帮助调试和理解代码
- 添加注释：为代码添加注释
- 修复bug：检测并重写有问题的代码以解决bug
- 移植到一种语言：将您的代码转换为JavaScript、TypeScript、Python、Java、C++或PHP
「点到哪里改哪里」，修改代码也将和修改文字一样直观简单。
为什么要更新用户界面？
OpenAI在博客中表示，如果要让人工智能变得更有用、更易用，就需要重新思考我们如何与它互动。而canvas，就是一种全新的方法，未来还将经历快速迭代。

终极AGI界面canvas，GPT-4o也被优化了


为了让模型更适应canvas模式，团队也对GPT-4o进行了必要的修法，添加了一些核心行为：
- 触发canvas的打开，进行书写和编码
- 生成多样化的内容类型
- 进行有针对性的编辑
- 重写文档
- 提供内联形式的修改意见
值得一提的是，对GPT-4o进行的这些训练采用了OpenAI的合成数据生成技术，包含了从o1模型中提取的输出。
此外，团队还使用了20多项自动内部评估来衡量进展情况。
首先，一个关键的挑战是定义何时触发canvas。模型既需要灵敏识别有检查、修改需求的任务，比如「写一篇关于咖啡豆历史的博客文章」，同时也要避免过度触发，比如「帮我做一份新的晚餐食谱」这种一般的任务就不太需要canvas。

与带有提示指令的基线模型相比，调整后的GPT-4o的触发决策正确率分别达到了83%和94%
第二个挑战涉及在canvas被触发后调整模型的编辑行为，特别是决定何时进行有针对性的编辑而不是重写整个内容。
这就要训练模型，在用户明确选择文本时，更倾向于执行有针对性的编辑而非重写。随着模型不断完善，这种行为的能力也在不断发展。

相比基线模型，带有canvas的GPT-4o在写作和编码任务上有18%的性能提升
最后，训练模型以生成高质量的代码注释同样需要细致的迭代过程。
这个评估任务与前两种情况不同。canvas是否触发以及是否进行了有针对性的编辑行为，很容易进行自动化评估，但以自动化方式衡量代码注释的质量，因此团队选择了人工评估。
相比基线模型，集成canvas后的GPT-4o在注释准确性方面有30%的提升，质量提高了16%。
这表明，与带有详细指令的零样本提示相比，合成数据的训练显著提高了模型的响应质量和行为。

网友玩疯了


canvas一经发布，已在全网掀起热议。
Every初创公司创始人表示，很明显，OpenAI不仅仅是在构建聊天机器人，他们还试图为AI时代构建一种全新的操作系。
一名开发者表示，canvas界面是游戏改变者。
他刚刚通过canvas和ThreeJS一起创建了一个tesseract/Hypercube可视化工具，并称自己喜欢统一的UX聊天、在线评论和观看GPT-4o在代码上发挥其魔力，所有这些都在一个地方完成完成，永不过时。
还有网友表示，canvas界面做的非常好，而且一切都是实时流畅的。
不过，它让我们意识到一个重要的问题，我们还不确定与AI协作写作的最佳方式是什么。
话虽如此，canvas让工作更加集成集成（cyborglike），而不是简单地轮流进行任务（centaurlike）。
还有人纷纷悼念Cursor。

核心贡献团队


canvas背后核心团队也随之全部公布。
研究主管是Karina Nguyen，还有3位核心研究人员Kai Chen, Michael Wu, Tarun Gogineni，12位核心工程/产品/设计师。
值得一提的是，提供支持技术领导人当中，还有离职的CTO Mira Murati。
Karina Nguyen
在加入OpenAI之前，Karina Nguyen曾在Anthropic任职，专注研究模型对齐能力和诚实研究，以减少LLM的幻觉。
值得一提的是，她曾领到了Claude Instant 1.2训练，在API中制作了该模型。
此前，作为一名设计工程师，Nguyen与Primer.ai、Dropbox、Square和《纽约时报》的团队在研发原型、新闻工具和产品功能方面进行了合作。
Kai Chen
Kai Chen在宾夕法尼亚大学获得了计算机科学本科学士学位。
她于2023年初加入OpenAI，此前Kai Chen还联合创办了两家公司，一个是AI助手领域的Dispatch、还有一家自动化劳动任务项目的Port Tecjnologies。
Michael Wu
Michael Wu目前是OpenAI的应用研究员。
此前，他曾以应用研究科学家身份，在Facebook工作了三年，任职期间训练了自然语言理解和深度学习模型。
此外，他还在Primer AI担任机器学习工程师、Dropbox担任软件工程师，在Naver Corp担任机器学习实习生，在苹果公司担任机器学习实习生。
2015年，Michael Wu在麻省理工学院获得了计算机科学和数学学士学位。

参考资料：
https://openai.com/index/introducing-canvas/
https://x.com/karinanguyen_/status/1841889811931791642
机器学习实验室
专注于机器学习和深度学习技术与实践。
 最新文章
245个目标检测开源项目合集，建议收藏！
制作个人的第一个RAG demo！
谷歌版Sora发布：最大对手竟是「可灵」，OpenAI反而最拉胯
NeurIPS 2024 | Ilya重磅演讲：预训练将结束，接下来是超级智能「自我意识」
多模态融合，顶会超神了！
今夜凌晨，OpenAI Sora炸裂登场！网页版已经挤爆
LSTM卷土重来！xLSTM和Vision-LSTM共同引领文艺复兴
“让AI不再难学"，知名UP主梗直哥的《破解深度学习》来了！
全球五大巨头GPU总量曝光！谷歌第一微软第二！
245个目标检测开源项目合集，建议收藏！
《深度学习图像分割》第4章：基于编解码结构的分割网络
RAG还是微调，怎么选？
吴恩达：每个AI从业者都应该关注Agent！
Flux已成当下最火热的文生图模型？
计算机视觉顶尖期刊和会议有哪些？
被导师放养，后果可能很严重。。。
两张3090复现SearchGPT！
啥工作量？！60天就卷出一篇CCF-A顶会...
AlphaFold3重磅开源，诺奖级AI颠覆世界！GitHub斩获1.8k星，本地即可部署
《深度学习图像分割》第3章：图像分割关键技术组件
涨点神器！100个即插即用缝合模块【合集下载】
导师一个idea都没有，怎么发CCF-A？
《深度学习图像分割》第2章：传统图像分割算法
ChatGPT变身AI搜索引擎免费用！
大模型可解释性怎么搞？(附代码)
新扩散模型OmniGen一统图像生成！
国内首本大模型推荐系统著作来了！
只要敢捞“偏门”，篇篇都是顶会顶刊！
245个目标检测开源项目合集，建议收藏！
NeurIPS'24大模型LoRA超级变体！仅需参数0.4%达微调效率巅峰！
Windows用户也能使用桌面版ChatGPT了！
发论文别太老实，用对方法篇篇都是顶会顶刊！！！
OpenAI王炸来了！强化学习也有scaling law？
预告 | 《深度学习图像分割》将在GitHub逐步内容开源！
算法岗和开发岗有什么区别？
算法岗就业，Kaggle金牌和CCF-A一作哪个更有用？
82个即插即用的深度学习缝合模块！
Llama 3.2 来了！支持图像推理，还有可在手机上运行的版本
张俊林详细拆解o1：OpenAI o1完整训练过程逆向推演
对标Claude Artifacts！OpenAI canvas一夜封神！
首个Mamba+Transformer混合架构多模态大模型来了！
在深度学习中，是否应该打破正负样本1:1的迷信？
首个工业级异常检测的大模型AnomalyGPT！AAAI 2024已开源！
Claude工程师聊prompt：不要把模型当小孩子、不需要角色扮演、实话实说
张俊林：OpenAI o1的价值意义及强化学习的Scaling Law
ECCV'24最强多模态检测器！详解Grounding DINO：创新架构、训练代码！
Sora年内发布无望？视频生成还有戏吗？
KAN 2.0来了！会是AI+Science的答案吗？
基于YOLO v8融合CLIP！CVPR 2024多模态检测神器！
GPT-4结合SAM 2：免训练多模态分割的全新解决方案！
 分类
时事
民生
政务
教育
文化
科技
财富
体娱
健康
情感
旅行
百科
职场
楼市
企业
乐活
学术
汽车
时尚
创业
美食
幽默
美体
文摘
 原创标签
时事 社会 财经 军事 教育 体育 科技 汽车 科学 房产 搞笑 综艺 明星 音乐 动漫 游戏 时尚 健康 旅游 美食 生活 摄影 宠物 职场 育儿 情感 小说 曲艺 文化 历史 三农 文学 娱乐 电影 视频 图片 新闻 宗教 电视剧 纪录片 广告创意 壁纸头像 心灵鸡汤 星座命理 教育培训 艺术文化 金融财经 健康医疗 美妆时尚 餐饮美食 母婴育儿 社会新闻 工业农业 时事政治 星座占卜 幽默笑话 独立短篇 连载作品 文化历史 科技互联网
 发布位置
广东 北京 山东 江苏 河南 浙江 山西 福建 河北 上海 四川 陕西 湖南 安徽 湖北 内蒙古 江西 云南 广西 甘肃 辽宁 黑龙江 贵州 新疆 重庆 吉林 天津 海南 青海 宁夏 西藏 香港 澳门 台湾 美国 加拿大 澳大利亚 日本 新加坡 英国 西班牙 新西兰 韩国 泰国 法国 德国 意大利 缅甸 菲律宾 马来西亚 越南 荷兰 柬埔寨 俄罗斯 巴西 智利 卢森堡 芬兰 瑞典 比利时 瑞士 土耳其 斐济 挪威 朝鲜 尼日利亚 阿根廷 匈牙利 爱尔兰 印度 老挝 葡萄牙 乌克兰 印度尼西亚 哈萨克斯坦 塔吉克斯坦 希腊 南非 蒙古 奥地利 肯尼亚 加纳 丹麦 津巴布韦 埃及 坦桑尼亚 捷克 阿联酋 安哥拉