UI-TARS Desktop:智能桌面控制更高效

UI-TARS Desktop:智能桌面控制更高效

字节跳动开源的革命性桌面控制工具,自然语言操作电脑,提升办公效率。

核心内容:
UI-TARS Desktop的介绍与开源信息
详细的安装与配置步骤
使用UI-TARS进行自然语言控制电脑的操作示例


本文预计阅读时间:2分钟

UI-TARS介绍

UI-TARS是bytedance(字节跳动)开源的,基于视觉语言模的 GUI 代理应用程序,允许使用自然语言控制计算机。

详情:https://github.com/bytedance/UI-TARS-desktop

UI-TARS安装

访问下载地址:https://github.com/bytedance/UI-TARS-desktop/releases/tag/v0.1.2选择对应的安装程序。安装都是一直下一步,此处省略。

安装完毕后,点击图标打开UI-TARS:

UI-TARS Desktop:智能桌面控制更高效

API准备

使用UI-TARS需要火山引擎支持,访问https://www.volcengine.com/product/ark:

UI-TARS Desktop:智能桌面控制更高效

使用手机号登录:

UI-TARS Desktop:智能桌面控制更高效

登录到火山引擎界面:

UI-TARS Desktop:智能桌面控制更高效

点击“API Key管理”—>“创建API key”:

UI-TARS Desktop:智能桌面控制更高效

自定义一个名称,点击“创建”:

UI-TARS Desktop:智能桌面控制更高效

创建完毕后,点击小眼睛,可以查看key:

UI-TARS Desktop:智能桌面控制更高效

点击“复制”按钮,将key保留备用:

UI-TARS Desktop:智能桌面控制更高效

UI-TARS配置


参考:https://github.com/bytedance/UI-TARS-desktop/blob/main/docs/quick-start.md#doubao-15-ui-tars-on-volcengine

点击“Settings”,除了API Key之外,其他内容参照如下:

UI-TARS Desktop:智能桌面控制更高效

因为使用了指定的豆包大模型,需要在火上引擎中开通服务。

在火山引擎中,点击“开通管理”,找到指定的大模型,点击“开通服务”:

UI-TARS Desktop:智能桌面控制更高效

开通时会提示地区,默认即可:

UI-TARS Desktop:智能桌面控制更高效

UI-TARS使用

配置完毕后,可以通过对话框发送任务,比如:

UI-TARS Desktop:智能桌面控制更高效

此时,UI-TARS会调用浏览器查找内容,返回结果:

UI-TARS Desktop:智能桌面控制更高效


这个过程它会操作浏览器,将获取到结果返回。

更多妙用,大家可自行摸索。

[](javascript:void (0);)

开源大模型开源大模型本地部署开源大模型汇总

© 版权声明
THE END
喜欢就支持一下吧
点赞206 分享
评论 抢沙发
头像
欢迎您留下宝贵的见解!
提交
头像

昵称

取消
昵称表情代码图片