Rokid Glasses应用心愿单-采购清单

推荐语

Rokid Glasses帮你告别购物清单烦恼，智能记录并分类你的采购需求，让生活更便捷。

核心内容：
1. 生活中常见的购物遗忘场景与现有解决方案的不足
2. Rokid Glasses如何通过头控+语音交互简化采购记录
3. 眼镜端与手机端的协同操作及AI智能分类功能

杨芳贤

53AI创始人/腾讯云(TVP)最具价值专家

#起因

你是否与我一样遇到过如下尴尬的场景：

开始做菜的时候发现食材或者调料没了~~~

收拾家务的时候发现清洁剂没了~~~

车开到路上发现玻璃水没了~~~

......

这样的场景多了，我就在想用什么方式能够及时的把需要买的商品提前汇总记录下来，但常见的工具无非是“便签”或“待办日程”，最终每个字还需要自己去逐个录入进去。

另外随着线上购物最近十多年的演化，消费者日常用到的商品都可以通过手机APP轻松下单购买，但这个购买动作可能需要在不同的APP上来去完成，比如生鲜蔬果需要在盒马或小象超市上买、日用百货最好到京东上买、服装鞋帽淘宝天猫款式全......

最终我不得不要将自己编辑的一份清单再分拆为不同版本，以便于自己或者家人及时购买，想想就头大~~~

#历史经验

对于这个触发“复购”的场景，大厂也思考过解决方案。比如亚马逊的Dash Button，是一款塑料材质的实体按钮，需连接Wi-Fi使用每个按钮对应一款特定商品(如洗衣粉、咖啡等)。用户按下按钮后，系统会根据预设的账户信息(如地址、支付方式等)自动下单购买绑定的商品。

但经过几年的发现，Dash button已经于2019年退市，亚马逊也通过语音音响和虚拟按键的形式代替了该功能。

Dash button虽已退市，但它的产品逻辑说明用户的购买意愿很多都是“应激反应”，尤其是之前的商品即将用完，用户会很自然的产生复购意愿，但这些场景往往可能不方便立即掏出手机进行记录，并且出于这种动机购买的商品比例也很大（生鲜、蔬果、日常生活用品、个人清洁用品等），这就有机会用Rokid Glasses在眼镜端再做一遍了。

#眼镜端操作

为了方便原型设计和交互设计，本次方案依旧是在此前设计的“头控+语音”的基础上操作，不清楚朋友的请看此前的文章《Rokid Glasses头控+语音交互》。

长按眼镜腿的触控区，眼镜显示区将显示场景菜单界面，同时眼镜将开始录音，视线中心同时显示录音的时间。

在说话即将结束前头部微抬（图片场景中，应用在正上方位置），显示选中时手从触控板上松开，此时语音将发送给该应用，同时打开应用。

录音发送给应用后，会通过AI模型来去对语音识别成文字，同时对内容进行进一步解析。如果录音时长过短，将视为无内容，此时将直接打开该应用。

眼镜端打开采购清单应用时，将显示各个分类下已有的物品或商品信息。用户可以通过前后滑动触控区来去切换不同的分类，也可以双击触控区关闭应用显示。

#手机端交互

目前的光波导眼镜，还主要作为重要信息的显示，因此复杂的信息及交互操作还需要通过APP来去承载。

在眼镜端录音进行的识别信息，将会最终显示在“AI会话”中。由于通过头控的形式已经将语音的发送方向指定，因此会话中会根据发送的方向分列。

点击“采购清单”进入会话详情，会显示此前在眼镜端发送给应用的录音。除了可以再听一遍此前录音外，应用会将ASR识别的文本在下方展示。应用的反馈将会以对话形式呈现，写入采购清单的信息将会单独呈现，如果用户认为识别有误可以点击“❌”撤回。

除了在眼镜端语音录入外，也可以在app中发起语音或文字输入，之后处理流程和眼镜端录入一致。用户在查看完会话信息后可以点击底部最左侧按键进入“采购清单”应用。

除了从会话中进入应用，还可以从“设备”页中找到应用并进入。进入应用将会直接看到采购清单的当前分类，分类中如果有信息将会在分类后显示数字，点击之后该分类的商品或物品名称将展开在右侧，单击商品卡片会展开显示，可对该商品或物品进行编辑或删除。

在清单的下方会显示此前记录过的商品或物品信息，用户可以单击直接添加到上方的清单中。采购方式是清单最终的结束模式，可以选择生成图片，也可以转为待办信息（待办应用还没做完，估计方案下周能发出来）。

除了可以对商品（或物品）进行文本修改外，也可以通过长按来去将其进行顺序调整或分类调整。

不同的分类商品可能最终要去不同的平台进行购买，所以可以通过多选分类的形式把同一平台购买的商品一起显示，最终点击“生成图片-采购”来生成一份较为完整的采购清单图片，图片生成以后视为商品已采购，这些商品信息将会被删除。

商品的分类是很主观的事情，不同的用户对于同一种商品习惯购买的平台也不一样，所以“采购清单”应用还需要支持分类的自定义。由于最终的商品信息提取和分类都是通过AI来去实现的，因此就需要在添加分类的时候独立描述一下这个分类的含义（这个含义是说给AI模型的，生成的分类名称和描述将会附加到识别提示词中）。

上图为分类描述的生成提示词，用户输入名称后点击“ai生成描述”将会通过该提示词生成一段描述，该描述和名称也可以再次修改，之后保存即可。

用户自定义的分类名称和描述将会单独保存，在进行语音识别的时候，会根据自定义分类动态生成一套自定义提示词（主要替换技能2中的标签信息部分），最终通过两个模型调用便可实现用户自己的自动分类。

整了这么多最终就是生成图片？没有更进一步操作吗？

有的朋友，有的！

#更进一步

既然采购清单最终也是要在手机端转换成要购买的商品，那未来将会通过和不同电商平台app的打通实现更便捷的操作。

在采购方式选择中可以直接看到不同电商平台的选择，选中之后将会把目前已经展开的商品清单提交到选定平台进行进一步搜索，未来如果可以账号打通（目前乐奇已经和支付宝进行了账号打通），那采购页面可以直接默认勾选的常购商品。

采购清单中的多个商品将分行显示，商品卡片可以滑动展示推荐的其他商品，通过滑动可以快速查看是否有价格更为合适或者品质更为优质的商品。

由于分行商品信息展示不全，用户可以点击单个商品卡片会展示完整商品信息，可以通过左右按钮来切换商品，点击“选中”卡片边缘变色视为选中。

查看选中的商品之后，可以点击页面下方的“添加购物车”，此后会正式跳转到对于的电商app中，之前选定的商品也会直接添加到购物车中，待用户调整好数量便可直接进行结算。

#结语

做一个采购清单的怨念要追溯到我家闺女出生，在那之后有各种各样的用品需要进行及时更新，这不单“折磨”着我一个人，也“折磨”着我妻子和父母，不管未来是否能做出来这个完整应用，希望未来能更便利。

念念不忘，必有回响~~~