【作品展示】掌玩小子Auto.js高级版 实现AI豆包手机助手开发者大赛
摘要:掌玩小子双12盛典Auto.jsAI手机助手开发者大赛圆满落幕,共收到4个优秀投稿。创新奖得主"风"开发了基于大模型的解决方案,无需额外依赖;拔萃奖"墨兮"和"弦曲终"分别实现了端侧AI自动化和语音交互助手;勤奋奖"悯默"贡献了无障碍操作改进。所有参赛者均获奖励,作品涵盖AI自动化、语音识别等创新技术,体现了开发

掌玩小子双12盛典:Auto.js AI手机助手开发者大赛已圆满结束!
大赛期间,我们共收到了4个优秀的有效投稿。为感谢大家的积极参与,每一位参赛者都将获得奖励。通过公开投票的方式,评选出本次大赛的 创新奖(1名)、拔萃奖(2名) 和 勤奋奖(1名)。以下为各参赛作品的详细介绍!
【创新奖】风:QQ 705237371
作品描述:本方案利用大模型和无障碍实现,不额外装ADB输入法,不用开USB调试,不依赖其他app,对新手友好,同时也实现了人工介入回调,用来处理验证码,登录等情况。通过post请求上传需求描述和截图,调用官方部署好的AutoGLM大模型,得到大模型返回的动作数据,做出相应的回应。
开源地址:https://github.com/liuxf091/AutoGLM-for-Autojs
风投稿
【拔萃奖】墨兮:QQ 3250260833
作品描述:基于 AutoJS Pro 第二代引擎的手机端 AI 自动化 Agent。实现了 AutoGLM 的主要 API 与动作协议,内置可视化 UI(对话/Agent 模式),在设备本地完成截图理解、任务规划与自动操作,无需 PC 端控制。核心亮点:• 高兼容:对齐 AutoGLM 动作协议,支持所有OpenAI协议的多模态大模型。• 纯端侧:依赖 AutoJS Pro Node 引擎 + Rhino 悬浮窗,无需 Python/PC。• 完整链路:任务拆解 → 截屏 → 模型推理 → 动作执行 → 结果回写,内置无效动作一次自动重试。• 可视化 UI:Ask 对话、Agent 任务双模式,支持配置主模型与聊天/Call_API 模型。• 安全兜底:无障碍检查、悬浮窗就绪等待、动作校验、人工接管/提示。
开源地址:https://gitee.com/moxi2534/auto-glm-auto-jspro
墨兮投稿
【拔萃奖】弦曲终.:QQ 614779780
作品描述:基于AutoJS V7开发的智能手机自动化助手,融合了“讯飞语音识别”与“AI 大模型”技术。用户可通过“底部弹窗”选择“文字输入”或“语音输入”两种交互方式,用自然语言描述需求,如"打开微信给张三发消息"。系统会实时录音、调用讯飞 WebAPI 进行语音转文字,再由 AI 模型理解指令并自动执行屏幕操作。核心架构采用"PhoneAgent"代理模式,支持多步骤任务执行、敏感操作确认、人工介入接管等安全机制。界面设计模仿输入法风格,从底部平滑弹出,支持动画效果,体验流畅自然。
开源地址:https://github.com/ShiYun520/AutoGLM-For-AutoJSv7
弦曲终投稿
【勤奋奖】悯默:QQ 1242129506
作品描述:操作事件都改成无障碍的
开源地址:https://wwaxn.lanzout.com/i2WPz3dw6nzi
悯墨投稿
技术无好坏,而在于分享精神。
更多推荐



所有评论(0)