Claude重磅升级,可以像人一样控制电脑了!

文摘   2024-10-23 01:13   重庆  

点击上方蓝色字“越山集” >右上角...>设为星标 ⭐

大半夜的,朋友圈,微信群里,全是Claude更新的消息,AI春晚的感觉。

Anthropic 刚刚放了个大招!他们推出了升级版的 Claude 3.5 Sonnet 和 Claude 3.5 Haiku,还有一个超酷的新功能——“模拟计算机访问”

用大白话说,就是 Claude 现在能像人一样用电脑了:能看屏幕、动鼠标、点按钮、打字。开发者们可以用这个功能来自动化各种重复任务、开发和测试软件,甚至还能在复杂的应用场景中进行互动。这下子,AI圈子里肯定要炸锅了!

Anthropic官方推特上连发几条:

推出升级版 Claude 3.5 Sonnet,以及全新模型 Claude 3.5 Haiku。我们还推出了一项新功能测试版:计算机使用。开发者现在可以指导 Claude 像人类一样使用计算机——通过查看屏幕、移动光标、点击和输入文本。

Claude更新

新款 Claude 3.5 Sonnet是首个提供公共测试版计算机使用的先锋 AI 模型。尽管具有开创性,计算机使用仍处于实验阶段——有时容易出错。我们提前发布以收集开发者的反馈。

本地调度

我们构建了一个 API,使 Claude 能够感知并交互计算机界面。此 API 使 Claude 能够将提示翻译成计算机命令。开发者可以利用它来自动化重复性任务、进行测试和质量保证,以及执行开放式研究。

自动操作网页

我们正在尝试一种全新的根本性变革。我们没有为Claude完成特定任务制作专用工具,而是正在教授它通用计算机技能——使其能够使用为人类设计的大量标准工具和软件程序。

听命于你打开IDE写代码并调试

即使在录制这些演示时,我们也遇到了一些有趣的时刻。其中一次,Claude不小心停止了长时间运行的屏幕录制,导致所有视频素材丢失。后来,Claude暂停了我们的编码演示,开始浏览黄石国家公园的照片。

自动搜索信息并处理
开始浏览黄石国家公园的照片

越山的几点感想:

RPA(机器人流程自动化)这波升级可真是要让效率飞起来了。自动化技术+AI生成内容很火,现在加上AI控制操作,自动化的水平肯定得再上一层楼。想想看,以后那些枯燥重复的活儿,都能扔给这些聪明绝顶的"机器人"去干了,人类还可以干啥?

AI2APPs这类AIOS项目挺好,但大厂一出手,创业项目就没法玩。他们有资源,有技术,能快速把这种创新项目落地。所以,做细分垂直类的应用靠谱点;而做平台类,或者在当前AI能力上缝缝补补的事,很快就会没路子。

还有那些老电脑,这不就能瞬间升级成AIPC(人工智能个人电脑)!说好的明年才出AIPC呢?

这些技术还在试验阶段,应该还没到完美的程度,成本问题也得好好考虑。但这都不是事儿,随着技术的不断发展,这些小障碍肯定都能被攻克。未来真的有无限可能。

AI为人类打工的时代已来!所以,赶紧学学智能体技术吧。点击“阅读原文”可购买我们的智能体从入门到变现专栏。或者加我领取AI智能体学习资料。

就酱,觉得有用的话,欢迎点赞点个“在看”。也欢迎加我好友, 交流, 围观, 学习。


越山集
专注AI智能体,分享AI应用,探索和实践AI应用落地,我是越山,关注我,让AI为你打工。
 最新文章