Newshot

浮屏:截图即可「上岛」,还能帮你记录生活

Summary

浮屏是我一个人开发的应用。它最初只是为了解决一杯柠檬水的取餐码问题,后来慢慢长成了一个记录生活小片段的工具。 查看全文

Original text(via 少数派)

Matrix 是少数派的写作社区,我们主张分享真实的产品体验,有实用价值的经验与思考。我们会不定期挑选 Matrix 最优质的文章,展示来自用户的最真实的体验和观点。

文章代表作者个人观点,少数派仅对标题和排版略作修改。

浮屏(Floato)是一款 iOS 应用,它用 AI 分析你的截图,再把截图整理成对应场景的精美卡片,显示在锁屏、灵动岛和桌面小组件上。取餐码、取件码、电影票、火车票、登机牌、团购兑换券、App 订阅……这些平时散落在各个小程序和 app 里的信息,截一张图,就能在需要的时候出现在手边。

为什么要做浮屏

今年夏天我经常夜跑。跑完给自己买一杯蜜雪冰城的柠檬水,算是一个小小的奖励。但买这杯柠檬水的过程并不轻松:先在小程序里找到门店下单,等餐的时候又要一遍遍切回小程序看取餐码。人在路上、手里拿着手机,这种反复切换很烦人。

作为一个 iOS 用户,我很自然地想到,这正是灵动岛和实时活动(Live Activities)最擅长的场景:一个需要持续关注、但不值得一直打开 app 的临时信息。于是我开始了浮屏的探索。

在做浮屏之前我也试过不少办法。最常见的是用快捷指令把取件码存进提醒事项,或者干脆截图之后在相册里翻。一些 app 也开始逐步支持自己的实时活动,但每家只管自己那一种订单,这些方案各自都能用,问题在于它们是分散的:取件码一套流程,电影票一套流程,火车票又是另一套。

我想要的是一个统一的入口:不管截图来自哪个小程序、哪个 app,都用同一个动作交给浮屏,剩下的识别、分类和排版都由它完成。

识别:截一张图就够了

浮屏不需要你手动填写任何表单。你只需要把截图交给它,AI 会识别出场景类型和关键信息,比如取件码、座位号、车次、检票口、有效期等,并生成一张对应风格的卡片。

  • 在任意 app 的分享菜单中选择浮屏;
  • 通过快捷指令自动处理,适合想把流程做得更「无感」的用户。

在 AI 识别上我也碰过壁。一开始我选用的模型不稳定,它的识别时间存在很大的不确定性,快的时候只需要六七秒,慢的时候需要 30 秒甚至更久,导致超时。中途我尝试过很多的解决办法:

  • 优化提示词,提升缓存的命中率
  • 做更多的路由拆分,而不是把所有的场景都放在一个大的 prompt 下面
  • 尝试集成流式解析的方式,让用户在查看时不会只能看到一个 loading,而是可以渐进式地一点一点看到卡片的解析过程
  • 决策模型,先让小而快的决策模型来判断应该走哪个分类

好在最终在识别速度和识别正确率中找到了一个不错的平衡。就我自己的使用体验来说,大部分场景的识别准确度都很高。

更多场景

取餐码只是一个起点。有了识别能力之后,增加新的类型其实并不难,真正花时间的是想清楚这类卡片最该突出哪些信息,以及它在锁屏上应该长成什么样子。

浮屏现在也支持取件码、团购券、App 订阅、火车票、飞机票和电影票。下面是一些实际使用里的截图。

订阅和前面这些一次性的凭证不太一样。它会按月或按年回来。把扣款记录交给浮屏,它会按周期记下金额,再推算出每项服务一共付了多少,整理成一张清单。

两个核心页面

浮屏的结构很简单,前台主要是两个页面。第一个是卡片列表,所有识别好的卡片都会收在这里,正在使用的卡片可以显示在锁屏和灵动岛上,用完之后标记为「完成」即可。

第二个是「回顾」页面。它以日历的形式展示你过去完成的卡片:哪天喝了什么、看了哪部电影、坐了哪趟车去了哪里。原本用完即弃的截图,在这里变成了一份自动生成的生活记录。这也是我自己最常打开的页面。

回顾页并不是一开始就计划好的。用了一段时间以后,我发现标记为「完成」的卡片其实很有意思:翻一翻就能看到自己哪天看了什么电影、喝了什么、去了哪里。这些截图原本会被删掉或者淹没在相册里,但整理成卡片以后,它们自然就成了一份不需要刻意去写的生活记录。

刚好我最近在出差,不能在家做饭,通过这种方式我可以记录我每餐吃了什么、点了什么,最终回味起来也还挺不错的。这也让我意识到,光是这周就吃了 3 次麦当劳。

后来我发现,身边不少朋友其实有一个更朴素的需求:收藏。有人会把每一张电影票根夹进本子,有人会留着每一趟车票、每一次看展的门票,还有人喜欢记下自己喝过的每一杯奶茶。只是现在大部分票都变成了电子的,想留也无从留起,最后都散落在相册和各个 app 的订单页里。

浮屏刚好适合做这件事。每一张标记为「完成」的卡片都会留在回顾页里,取件码、火车票、电影票、团购券都在同一本日历上,品牌、时间和地点也都整理好了。用的场景越多,这份收藏就越完整。我自己现在会特意把看过的电影和去过的展都丢进浮屏,就算当时不需要提醒,也想让它们在回顾页里留一页。

关于隐私与价格

浮屏依赖 AI 识别截图,所以你的截图会被上传给模型服务商处理。如果你对隐私非常在意,浮屏可能不是最适合你的工具。同样,因为 AI 还是存在延迟,如果你对速度要求很高,目前的 app 的体验也还需要优化。

浮屏尽力保证图片解析可以在 10 秒内完成。换个角度看,不依赖离线模型也有好处:识别效果可以随时优化,不必等 app 发布新版本。

浮屏目前已在美区等 App Store 上架,国区正在备案中,预计一周内过审。所有新用户都会获得免费的十个识别点数。而会员可以获得合理范围内不受限制的识别,价格为:

  • 月度会员 1.99 美元(合人民币约 14 元);
  • 季度会员 3.99 美元(合人民币约 27 元);
  • 年度会员 7.99 美元(合人民币约 54 元)。

写在最后

浮屏是我一个人开发的应用。它最初只是为了解决一杯柠檬水的取餐码问题,后来慢慢长成了一个记录生活小片段的工具。

如果你也常常在小程序之间来回切换找取件码,或者希望给日常留下一点痕迹,欢迎试试浮屏,也欢迎在评论区告诉我你希望它还能识别什么场景。最后感谢你读到这里,我为少数派读者准备了两个兑换码,有效期至 2026 年 11 月 30 日。

  • 兑换码 SSPAI:免费体验一个月会员;
  • 兑换码 SSPAIYEAR:首年以 5.99 美元(约合人民币 40 元)开通年度会员,次年起按原价续费。

兑换方式:在 app 的购买页面输入兑换码,或直接打开兑换链接(SSPAI、SSPAIYEAR)。兑换码仅限新用户和已过期的订阅用户使用,且需要使用非中国大陆地区的 Apple ID。

关注少数派小红书,感受精彩数字生活 🍃
实用、好用的正版软件,少数派为你呈现 🚀

The text above was extracted automatically from the source page and may miss images, tables or code blocks. The original is authoritative.

Published by 少数派
This site only summarises and aggregates; copyright stays with the original author. Headlines and summaries follow the source — where they differ, the original wins.
Read the original ↗