豆包工作到底是啥
这次小编要介绍的是字节跳动的一个豆包新产品--豆包工作。简单来说,豆包工作是个 Agent(智能体)。要说它跟之前的豆包有啥区别,那就是以前的豆包只有你问它答的能力,用户问个问题,它给出解决方案,但是还需要用户自己动手照着豆包给的方案自己去干。而豆包工作解决了这个还需用户动手去干的问题,做到了用户提出问题,豆包工作思考解决方案,并且自己动手去干活,拿出成品给用户直接用!
现在你可以让豆包工作帮你管理电脑,制作PPT文档、Excel表格,它还能模拟网页操作,帮你自动打开网页识别内容后进行下一步的操作等等。
豆包工作目前支持Windows和MacOS系统,本文以Windows版为例。
豆包工作的主界面比较简单,中间大部分是一个对话框,用户可以在这里向豆包工作下达工作任务,左侧则是功能导航栏,新工作任务、定时任务、技能·连接器·伙伴、云盘、手机遥控电脑,下面紧跟着置顶、项目、最近任务三个区块。
图1 豆包工作主界面
我们主要来看看中间的对话框主区域,正中间是豆包Logo加一句"今天有什么工作要处理?",下面给了四个快捷入口:处理日常工作、内容创作、完成调研分析、设计与创意,用户可以根据自己此次任务来进行快速选择。
输入框下方一排工具按钮可是非常重要,这里可以进行附件的添加(文本、图片等)、执行环境切换(本地电脑或云电脑)、项目管理、安全确认档位(始终询问/按需确认/全部允许)、技能库和连接器。右下角还能切模型和推理强度。
豆包工作能干什么 小编一个一个来实测
实测操作电脑 豆包工作真能接管你的电脑么
豆包工作有个重要的功能是可以读取、创建和修改电脑里的本地文件,也可以自动打开网页、填写信息和完成跨页面操作,甚至可以操控电脑完成一些的模拟人工操作。
豆包工作实测:下载软件
来看看小编的实测,小编下达任务:"帮我去华军软件园下载个飞书安装包"。豆包工作它会自动进行以下操作(用户可全程围观):打开虚拟窗口→打开虚拟窗口里的浏览器→打开华军软件园首页→找到首页的搜索对话框→输入"飞书"→获取搜索结果→分辨搜索结果→自动点击进入飞书下载页面→找到下载链接→等待安装包下载完毕,全程无需用户。
图2 小编围观豆包工作的全程操作
当然出于操作安全考虑,豆包工作是在一个虚拟窗口(子屏幕)内进行这一系列操作的,也就是操控电脑的。所以第一次使用这个功能的时候需要先部署该功能,用户需要点击"开始初始化"并允许豆包操作你的本地电脑。如果接下来涉及需要管理员权限的操作,Windows还会再弹"豆包操作电脑-凭据"窗口,让你输入当前用户的登录密码。这一步是无法跳过的。
图3 电脑操控初始化操作
也就是说豆包工作可以像真人一样操控浏览器,自动完成网页导航、信息查找、内容读取与文件下载,帮用户轻松处理网页任务。
豆包工作实测:全自动填写调查表
那么再来试试豆包工作对浏览器的操控,小编发送一个调查网址给豆包工作(该调查表包含了输入框和选择框),要求它用虚拟身份填写好这个调查表。接到任务后的豆包工作,用内置浏览器打开该网址后开始分析页面元素,然后就用虚拟身份帮助小编完成了这个调查表,甚至连开放题也编写好内容填上去了。
图4 豆包工作帮忙自动填写的内容
豆包工作实测:远程指令发送文件
接下来测试一下让豆包发送文件给我。我用手机豆包远程给Windows版的豆包发送命令"帮我把电脑桌面上的关于上海旅行的文件用飞书(微信)发送给我。"
没错,当电脑端的豆包工作和手机端的豆包APP登录同一账号后,手机端的豆包APP就可以远程操控豆包工作干活了。
利用飞书发送文件给我的命令得益于豆包工作连接器已经连接飞书,所以很快命令得以执行。
而利用微信发送文件给我的命令,豆包工作定位了文件后,采用虚拟用户操作的形式,模拟用户的键鼠操作,然后打开了微信电脑版,全程围观的小编就看着它点开微信电脑版,然后找了一圈,又切换回豆包工作主界面。接着又切换到微信电脑版,这次找到了"文件传输助手",但是却没有其他操作,又切换回主界面去了。如此几次后,终于完成了操作,耗时10多分钟。
图5 手机豆包APP可以远程操控豆包工作
图6 豆包工作用微信Windows版发送文件
豆包工作实测:其它一些电脑管理的活儿
既然这些复杂的操作豆包工作都能搞定,那么像整理桌面,整理文件,清理C盘,排查电脑系统故障之类的活儿,豆包工作弄起来就不在话下。
图7 清理C盘
Office三件套手拿把掐
先来看看豆包工作对用户接触得比较多的Office三件套的支持度。做PPT,写文稿,还有Excel表,来看看小编的实测。
豆包工作实测:PPT生成
小编测试的第一个任务是PPT的生成。在豆包工作的技能库里有专门的PPT技能。小编下达任务,让豆包工作把"豆包工作的功能介绍"做成一份PPT。结果做是做出来了,文字内容还行,只是效果太普通。
图8 第一次的成品
小编追加了一个命令"美化一下,再加上点图标"。然后豆包工作第二次给出来的效果就比第一次好多了,基本上能用了。当然有哪里不满意,你还可以追着它继续改到满意为止。
图9 优化后的PPT
这里小编要吐槽一下,不知道是不是个例,豆包工作第一次生成PPT的时间竟然花费良久,让小编左等右等,进度一直卡在那,也不提示到底是不是还在任务中,最终只能按停止然后让它继续操作。
豆包工作实测:制作历史选择题训练网页
小编测试的第二个任务是让豆包工作生成一个互动网页。"帮我根据初中必考历史重点内容,结合近5年的广东中考历史试卷,生成一个初中历史选择题训练网页,要求有答题记录、错题集,最好有错题分析,单选即可,需要包括题库。"
豆包工作在后台忙活了一段时间后,把网页搭出来了--题库、答题记录、错题集、错题分析全套配齐,小编赶紧打开测试一下,结果还不错,甚至连选错后的答案解析豆包都考虑到了。只是第一版的题库太少,小编又让它把题库扩展到2000条。
图10 全程不用小编介入生成的测试题库
图11 题库首页
豆包工作实测:Excel表格与图表生成
小编测试的第三个任务是 Excel。小编给豆包工作的任务是"帮我把这个月杭州的每日天气做个Excel表格,要求有数据、有图表"。忙活了一阵的豆包工作给了小编一个Excel文档,打开一看,里面有杭州的八月每日天气情况表格(天气状况、最高温、最低温、AQI、风向风力、降雨量)甚至还有两天的天气预测,此外还有降雨量柱状图、AQI趋势图、气温走势图。
豆包工作给出的数据比较全,图表也能看,但说实话有点简陋:配色单一、排版差点意思,或许再给它一个任务,让它美化一下就能好些了。
图12 豆包工作给出的表格
图13 比较粗糙的图表
其它的一些功能
定时任务
每天、每周要干的活儿,用户不必每次都自己吩咐豆包工作干活,豆包工作的定时任务功能,可以在用户设定的时间点,帮助用户盯着股票、写每日每周工作报告,告诉你今天有啥大新闻,还有可以定期备份文件等等。
丰富的技能库
术业有专攻,有些活还是让专业的来。豆包工作集成了较为丰富的技能库,在这里用户可以为豆包工作添加投资、医疗、创作等多领域专业技能,让你所获得的结果更加专业靠谱。
图14 技能库
生图生视频
没错,豆包工作还可以帮助用户生成图片与视频,用Seedream 5.0 Pro生成图片、海报与漫画,用Seedance 2.5创作视频。
小编简单测试一下,随手拍了个饮料瓶,把照片丢给豆包工作,让它生成宣传海报,你还别说,生成的海报有那个味了。
图15 豆包工作生成的海报
再让豆包工作生成一个古典仕女抚琴的视频,生成的视频从竹林开始,运镜转场后看见仕女抚琴,琴声由远及近。效果还不赖。
图16 豆包工作生成的视频
技能库与工作伙伴
豆包工作内置丰富的连接器功能,连接器也就是豆包工作通向外部世界的接口。飞书、QQ邮箱、Notion、百度网盘、腾讯会议等是办公这条线;同花顺、东方财富、企查查等是金融查数这条线。用户授权连接之后,豆包工作能直接读取用户飞书里的文档、查用户网盘里的文件,看地图找路线等等。
用户还可以请个专业工作伙伴(Agent)来跟你组成团队一起干活,甚至还能召唤个工作小队(内置整个团队)给你打工。
图17 召唤工作小队
和飞书深度打通
在豆包工作中,已经完全跟用户的飞书账号打通,它完整继承你权限范围内的企业知识:查会议结论、总结群聊、生成周报,还能直接传飞书文档、在提问时@同事。
悬浮按钮
悬浮按钮,随手派活。装完客户端,屏幕边缘会常驻一个豆包工作的悬浮球。左键点它,可以直接打开主窗口,也能唤出一个对话浮窗,在里面发消息、创建任务、调用技能、@资料,不用满桌面找窗口。
在右键菜单中藏着更多的功能:截图提问、开启录音转写、实时双语字幕,都能一键唤起;不想看的时候还能"隐藏直到下次重启"或者直接停用悬浮球。这几个小功能里最实用的是"截图提问"--看到个报错、一张表、一段网页内容,截个图直接提问,省了切窗口复制粘贴的麻烦。
图18 悬浮按钮
普通豆包和豆包工作区别
普通豆包和豆包工作有啥区别,这才是大家最关心的。
普通版豆包:聊天问答,给你一段文字、一个思路。后续整理文件、排版导出、核对数据,还是你自己动手。它不碰你的电脑。
豆包工作:接收指令后,自己规划步骤、操作电脑、调用工具,输出成品文件。一句话--普通版给的是"答案",工作版给的是"成品"。
而且普通豆包是免费问答,豆包工作则需要充值套餐才能使用。目前的活动就是新账号注册直接送一个月标准套餐。相当于白嫖一个月2,100额度的标准版,足够用户把所有功能试个遍。()目前豆包针对学生和教师推出新的优惠政策,相关人员可以留意一下。
顺便吐槽一下,小编在做测试时,做完以上那些测试后,就显示额度已用完,并提示几点钟恢复额度。不过有重置机会,消耗一次重置机会就可立刻恢复额度。
图19 提示小编额度用完
小编本以为消耗较多额度的应该是操控电脑和浏览器那一项,没想到查账单的时候发现视频生成才是大头,一个视频消耗了1000多额度。
图20 视频生成是大头
总结
豆包工作这次完成了"动手"的进化,可以帮助用户切实地完成下达的任务,而不是教用户怎么做。对每天花大把时间整理文件、汇总数据、写日报周报的用户来说,豆包工作可以帮你许多忙。而且电脑操控和浏览器操控功能让豆包工作能干的活更多。
不过小编在测试过程中发现豆包工作有个不好的地方,那就是项目进度提示做得不好,特别是电脑操控这一方面,豆包工作只回了一句"我已经把这个任务委派给执行 Agent 了,它会按 Windows 本地 GUI 流程操作,你可以继续做别的事,完成后我会把结果同步给你。"然后就安静下来了,小编等了好一会也不见它有什么进度回馈,也不知道是任务中断了还是在进行中。希望能够进行改进,不然用户不知道是等呢还是中断后重来。