📋 编辑总结
一个让 AI Agent 直接在你的屏幕上画大箭头、方框和文字的开源工具,把「Agent 想指给你看的东西」变成屏幕上的可视化标注层,而不只是对话框里的一段描述。该项目在 Hacker News Show HN 上获得 412 分、188 条评论,是当周讨论度最高的 Agent 交互实验之一。 定价:开源免费(具体授权与使用方式以 GitHub 仓库说明为准)。编辑评分:⭐ 4.5。

Big Arrow on the Screen是什么?

一句话解释:它让 AI Agent 直接在你的屏幕上画大箭头、方框和文字。

平时我们用 AI,Agent 想说"你右上角那个按钮点错了",只能在对话框里写一段话,你还得自己在屏幕上找。这个开源工具做的事情就是把这层限制打破——把「Agent 想指给你看的东西」变成屏幕上的可视化标注层,箭头指哪儿、框圈哪儿、哪块地方配一句说明,全都在你的实际屏幕上画出来。

它来自 Hacker News 的 Show HN,首发于 2026-10-10,拿到 412 分、188 条评论,是当周讨论度最高的 Agent 交互实验之一。项目开源,代码放在 GitHub 上(franzenzenhofer/big-arrow-on-the-screen)。

说白了,它是在尝试回答一个问题:Agent 的表达方式,是不是只能停留在聊天框里?

核心功能

1. 在屏幕上画大箭头做指向标注 这是它最直观的能力。Agent 要告诉你"点这里",就直接画一个箭头指过去。相比"在页面右上角偏下一点的位置"这种文字描述,箭头省掉了整个翻译过程——看到就懂。实际感受是,指向性任务的理解成本几乎被压到零。

2. 用方框圈出目标区域 箭头擅长指一个点,方框擅长圈一片区域。比如"这块表单填错了""这个卡片整体有问题",框一画出来,范围就清楚了。对排查 UI 问题、指出页面某个区块这类场景,比箭头更好用。

3. 在屏幕上叠加文字说明 光有图形不够精确的时候,加一行文字补上。三者(箭头、方框、文字)配合起来,其实是一套很朴素的标注语言,但胜在够用、易懂。

4. 作为 Agent 的可视化标注层输出 这是它和普通截图批注工具的本质区别。标注不是人画上去的,而是 AI Agent 把自己的意图转成屏幕上的标注。它扮演的是 Agent 的"输出通道"——不是对话框里的文本,而是直接落在屏幕上的图形层。

5. 开源实现,可查看源码、自行部署改造 代码是公开的,这意味着你能看到它到底怎么在屏幕上叠图层、怎么和 Agent 通信,也可以按自己的需求改。对于想研究 Agent 交互形态的人来说,这本身就是价值。

需要说清楚的是:它更像一个交互实验和思路验证,不是那种装完就能用的成熟产品。

版本/套餐对比

版本获取方式价格说明
开源版GitHub 仓库(franzenzenhofer/big-arrow-on-the-screen)免费(无公开定价信息)代码公开,需自行部署并做 Agent 侧接入
商业版 / 付费计划—暂无公开信息目前没有公开的定价、商业化或长期维护计划

坦白讲,这一节写不出太多东西——因为它就是一个开源仓库,没有 SaaS 套餐、没有企业版、也没有公开的收费方案。如果你期待的是"注册账号就能用",那它不是这个形态。

值不值得用?

优点:

  • 让 Agent 的指示从聊天框延伸到真实屏幕,指出问题位置一目了然,"哪儿出问题"这件事终于不用靠嘴描述
  • 把 Agent 的意图转成可视化标注层,减少了纯文字描述带来的理解损耗
  • 支持大箭头、方框、文字等多种标注形态,表达方式比单一文本丰富
  • 开源,代码可查看、可复用、可二次开发
  • Show HN 412 分、188 条评论,社区关注度和讨论热度确实高

缺点:

  • 目前主要信息来自 Show HN 讨论,缺少成熟的产品文档和完整生态,遇到问题多半得自己啃代码
  • 需要 Agent 侧做接入适配,普通用户上手有门槛,不是开箱即用
  • 在屏幕上叠加标注层,天然会带来界面遮挡的问题;如果 Agent 能看到并标注你的屏幕内容,隐私方面的顾虑也得自己权衡
  • 暂无公开的定价、商业化和长期维护计划信息,长期能不能持续更新是个未知数

总体结论: 值得关注,但不值得当成"现在就要用起来的生产力工具"。它是一个把 Agent 交互往前推了一步的实验——思路清晰、方向有意思,而且开源可玩。如果你是开发者或者对 Agent 交互形态感兴趣,花点时间看看代码、跑一跑,性价比很高;如果你只是想找个工具帮自己干活,现在还不是时候。

使用建议

  • 先跑通 Demo,别急着接自己的 Agent。 先确认标注层在你常用的屏幕环境下显示正常,再考虑接入。
  • 从单一标注类型开始。 先只用箭头或只用方框,跑顺了再加文字和多标注组合,一次性全上反而难调试。
  • 注意遮挡和隐私边界。 标注是叠加在真实屏幕上的,用之前想清楚:哪些窗口内容适合让 Agent 看到并标注,哪些不适合。
  • 把它当参考实现,而不是成品。 真正的价值可能不在于直接用,而在于看它怎么解决"Agent 输出到屏幕"这个环节——这套思路可以搬到自己的项目里。
  • 关注仓库动态。 项目还很早期,缺少长期维护计划,值不值得长期依赖,取决于后续更新节奏。

适合谁用?

推荐:

  • 正在做 AI Agent 交互、想让 Agent 输出形式更有表现力的开发者
  • 对"Agent 如何与真实屏幕交互"这个话题感兴趣、愿意读代码折腾的人
  • 需要做 UI 问题讲解、演示、教学类场景,想把"指哪儿"可视化的技术团队

可考虑:

  • 做自动化测试或流程演示,希望 Agent 能圈出界面区域作为辅助输出的团队
  • 对屏幕标注这类能力有兴趣,但暂时没有明确落地场景的产品探索者

不推荐:

  • 想找一个装完即用的日常效率工具、不打算写代码的普通用户
  • 对屏幕内容隐私敏感、无法接受 Agent 读取并叠加标注的使用环境
  • 需要成熟文档、稳定维护承诺和商业支持的企业采购场景