Droidrun:让 AI Agent 像人类一样操作 Android 手机


继 BrouserUse, ComputerUse 等项目后,PhoneUse 类的项目终于出现了 —— DroidRun。

Droidrun,为 AI Agent 提供 Android 操作系统,让 AI 以最先进的自动化方式控制 Android 设备。

Droidrun 结合视觉理解与 UI 结构提取,实现流畅的交互体验。它不仅能打开 App、发送消息,还能自动导航菜单、处理错误,甚至完成复杂任务如订车或录视频。

Droidrun 主要功能

  • 视觉+UI解析:结合视觉模型(识别屏幕内容)和 UI 结构提取(解析控件树),实现精准交互。
  • 智能自愈机制:智能检测错误(如网络中断、界面变化),自动调整操作路径。
  • Android Portal APK:类似Agent通行证的Android应用,部署后AI可通过它操控整个系统。
  • 多系统管理(即将上线):支持多台设备多实例,支持复杂工作流与并行处理。
  • 元素追踪(即将上线):精准提取点击元素,复现 LLM 行为,确保自动化一致性。
  • 凭证管理器(即将上线):支持登录信息和 2FA 绑定,个性化你的使用体验。

Droidrun 作者表示,该项目后续会在 GitHub 开源。

详情查看:https://www.droidrun.ai/


相關推薦

2025-04-01

力的实现依赖于三个关键特性: 深度思考:能够模拟人类在面对复杂问题时的推理与决策过程。 感知世界:能够像人一样获取并理解环境信息。 工具使用:能够像人一样调用和操作工具,完成复杂任务。 「AutoGLM沉思

2025-04-04

agents)最大的缺陷 —— 记忆能力将实现重大突破,它与人类的交互模式将发生显著变化。” AI智能体是能够独立行动和做出决策的人工智能,英伟达首席执行官黄仁勋今年1月曾表示“AI智能体的时代已经到来”。而OpenAI的萨

2024-08-27

整个 AI 世界仿佛在向用户勾勒了一张未来的蓝图,好像人类未来可以真正摆脱传统意义的劳动方式,转而让 AI 肩负起更重要的使命,帮助人类解决生产力的问题。这个概念一提出,上至七旬老者、下至八岁学童,都在侃侃而谈

2022-04-08

一直以来,微软都在致力于让 Android 和 Windows 更紧密地结合在一起;近期,该公司又朝着这一方向迈出了一大步。外媒 WindowsCentral 消息指出,微软正在再次重组几个关键团队和部门,其中包括将大部分的 Android 工作转移

2023-03-01

示警,拉起贸易战中的科技封锁线。华为手机过往基于 Android 开源操作系统搭建自己的程序与服务,但时任总统特朗普将华为列入黑名单,限制华为使用 Android 谷歌服务和应用商店。路透社认为,此举削弱了华为的海外智能手机

2024-02-16

阶段。” 他认为,AI 将会广泛普及,且价格低廉,成为人类“创造未来的工具”。但与此同时,AI 的全面进步和发展仍需要时间与耐心,“就像手机从原始的移动电话发展到如今的 iPhone 一样。” 此外,阿尔特曼还称当前的世

2025-04-15

部由ADK完成。 简单来说,用ADK开发就有点像拼乐高积木一样,喜欢哪块就拼哪个完全释放你的天马行空想法,再也不用为工具和底层技术发愁了。 from google.adk.agents import Agent from google.adk.tools import google_search root_agent = Agent( nam

2025-04-09

及代码级任务执行,从而构建多样化项目。它目前显示了人类在不同领域完成任务的能力的实习生水平。 https://x.com/rabbit_hmi/status/1907433070460068157 RabbitOS Intern 已经向所有人开放免费试用,只需要注册一个 rabbithole 账号,就能

2023-08-05

数据库,并经过多次训练学习,让模型能够“学习如何像人类一样开车”。

2023-10-28

开发下一代生成式人工智能模型,使其能够生成更多类似人类的表达。 长期以来,Meta 一直在采用开源方法公开其大模型产品,是业内众所周知的最大贡献者之一。仅今年它就向人工智能社区发布了大量人工智能模型和训练数

2025-04-08

度和准确性(详情)。 Notebook editing 像代码文件一样轻松地创建和编辑 notebooks,支持编辑和代理模式(详情)。 详情可查看更新公告:https://code.visualstudio.com/updates/v1_99

2023-03-28

源 Dolly 及其训练数据,让任何人都能开发出一个真正像人类的 AI,而无需投资数百万美元,也让这类 AI 不再是只有大型科技公司才能负担得起的东西,数以百万计的小公司也将能够从中受益。 除此之外,让各个小公司构建自

2023-06-01

一封公开信,信中强调了人工智能的危险,以及它可能对人类造成的巨大伤害。 信中的引言呼吁全球的 AI 商业决策者“公开地讨论人工智能会带来的最大风险”,使更多业内人士和普通民众对人工智能的风险有充足的了解

2024-11-01

容带回你们国家去,生根发芽、开花结果。我们共同促进人类社会的发展和繁荣。 2、提问:我来自日本,这是我第一次来到ICPC华为冠军杯挑战赛,我非常高兴能参加这样的全球化盛会。在日本,学生也有机会参加ICPC,尤其是