Twin Labs 通过让 AI 控制鼠标光标来自动执行重复任务

samiya323

来认识一下 T这是一家总部位于巴黎的初创公司，它希望为重复性任务创建自动化产品，例如让新员工参与所有内部服务、在缺货时重新订购商品、下载各种 SaaS 产品的财务报告、接触潜在客户等等。 “《Twin》的出发点是一个科幻小说的想法。我们看到了法学硕士技术能力的发展：基本模型。我们问自己的问题是，我们是否能够通过以我们执行任务的方式训练人工智能代理来复制自己，”Twin Labs 联合创始人兼首席执行官 Hugo Mercier 告诉我。 就 Twin Labs 而言，最有趣的事情不是他们在做什么（改进内部流程），而是他们是如何做的。该公司依靠具有视觉功能的多模式模型（例如具有视觉功能的 GPT-4 (GPT-4V)）来复制人类通常所做的事情。 在登陆多模式模型之前，Twin Labs 首先尝试使用传统的法学硕士开发自主代理。 “我们尝试了很多事情，部署了研究论文，测试了开源 GitHub 存储库。总的来说，结论是法学硕士完全不可靠。这意味着法学硕士正在做出错误的决定，”Mercier 说。 “到最后，任务还没有完成。” 据他介绍，GPT-4V已经接受了许多不同软件接口和底层代码库的培训，这开辟了新的可能性。 “当你显示一个界面时，它会理解按钮背后的功能，”梅西尔说。

与 Zapier 和其他自动化产品不同，Twin Labs 不依赖 API 或设计复杂的多步骤流程。相反，Twin Labs 更像是一个网络浏览器。该工具可以自动加载网页、单击按钮并输入文本。 例如，如果您正在招聘某人，您可能需要将此人的信息添加到您的薪资系统中，发送 Slack 邀请，创建一个 Google Workspace 帐号，并邀请您的新员工在医疗保险提供商处创建一个帐号。 公司通常会保留一长串任务清单，并在每次团队中有新成员时简单地回顾一下。这些任 阿尔及利亚手机号码列表 务并不复杂，但以正确的顺序并选中一些特定的框来做好它们非常重要。这就是为什么能够使用屏幕录制和自然语言描述来训练 Twin Labs 的人工智能助手非常重要。 但这家初创公司还没有实现这一目标——它正在努力实现这一愿景。两位联合创始人 Hugo Mercier 和 Joao Justi 在过去的六个月里构建了该产品的原型。的自主代理系统仍然面临许多挑战，例如完成一项任务需要花费相当多的资金，但基础设施和API成本在AI领域正在迅速下降。 Twin Labs 将首先推出带有预训练任务库的产品，以确保它们运行良好。之后，该初创公司希望开放其平台，以便客户可以创建自己的任务。



虽然许多人将人工智能产品与聊天机器人界面联系在一起，但 Twin Labs 的方法很有趣，因为它是与人工智能模型交互的创新方式。 Mercier 说：“我们真的想深入了解人们每天所做的事情，以及我们如何处理一些对他们来说实际上有点复杂的事情。” 继续阅读：Twin Labs 通过允许 AI 控制鼠标光标来自动执行重复任务 相关文章 微软希望界面 无类别 微软希望界面 作者： 奥利弗·罗 之间的中间位马斯克将把特斯拉迁往德克萨斯州 埃隆·马斯克将把特斯拉迁往德克萨斯州提出了一个可以翻译200种语言的人工智能模型 Meta提出了一个可以翻译200种语言的人工智能模型 按标签浏览 “技术 A 恋人 反洗钱组织 我们 阿根廷 亚洲 占星术 澳大利电图 在 状态 欧洲 根 际的 这 合法的 这 墨西哥 商业 姓名 消息 新闻1 为了 电影 波尔 政策 经过 俄罗斯 十二生肖 特克诺 和搜索即将推出！ 皮拉尔·贝内加斯 通过 皮拉尔·贝内加斯  间的关系开始走上坡分享 谷歌推出了“圈子搜索”功能（针对我们意大利人的圈子和搜索），该功能于最近几周专门出。这是一种通过人工智能在网络上搜索图像信息的创新且更直接的方式。