首页»版块 › 更多荣耀手机 › 荣耀Robot Phone ›【评论赢京东卡】重塑交互想象!全场景触控与语音方案大 ...
#星火共创营#

【评论赢京东卡】重塑交互想象!全场景触控与语音方案大征集

    [复制帖子标题和链接]

2.1万0

泡泡泡  LV3  发表于 9-26 16:40:42 河北 来自:荣耀30 Pro+
作为一个使用荣耀的牛马,我觉得工作上的事情让我产生很多想法
作为一名日常需要多设备办公的职场人,每天要在手机、平板、电脑之间来回切换处理文档、会议、资料,传统触控与语音交互在复杂办公场景中存在不少短板。结合本次人机交互共创活动,我针对办公场景,提出一套AI感知办公场景的多模态人机交互方案,将触控、语音、视线、手势结合,提升办公效率。

日常办公痛点很多:开会时,双手拿着笔记本,不方便触碰屏幕记笔记;长时间打字、点触屏幕,操作繁琐;会议里需要快速标记文档、截取画面,常规操作步骤多;语音输入容易把环境噪音收录进去,多人会议时语音识别容易出错;跨设备复制粘贴文件,需要来回传输。

我的创意,是融合视线识别、隔空手势、触控、AI降噪语音的多模态交互,适配桌面办公、线上会议、移动办公等细分场景。

首先是线上会议场景的交互优化。开会时,双手不方便触碰设备,开启轻量隔空手势。视线锁定文档,抬手比圈选手势,就可以圈出重点内容,自动生成标注;简单手势可以实现静音、截图、录制会议、切换PPT。同时搭载会议专属AI语音交互,区分参会人声和环境杂音,自动过滤键盘敲击、窗外噪音。可以语音下达指令:“记录这条重点”“把刚才这段话整理成纪要”,AI实时识别发言人,区分不同人的发言,自动生成分段会议纪要,不用手动打字。不方便出声的时候,视线点击屏幕,就可以选中文字,配合手势完成批注。

其次是跨设备文档协同交互。当平板和PC协同办公,我们可以在平板上手写批注,内容实时同步到电脑文档;也可以用语音直接在任意设备上修改文字,“把第二段字体加粗”“删除这句话”,指令直接作用于跨端同步文档。支持语音拖拽文件,直接将手机文件发送到PC,无需手动传输。触控可以作为兜底,手势、语音作为快捷操作,三种方式自由切换,用户可以按照自己习惯选择交互方式。

针对移动办公,比如外出路上用手机处理文件,语音交互优化断句、专业词汇识别。对于行业术语、专业名词,AI可以学习用户常用词汇,提升识别准确率。同时支持离线语音指令,没有网络也能完成文档标记、新建备忘录。考虑到隐私,本地敏感文件的语音处理在设备本地完成,不上传云端,保护办公资料安全。

同时增加交互轻量化自定义。用户可以自定义手势和语音指令,比如自定义“一键投屏”手势,抬手就可以把文档投屏到大屏;也可以关闭隔空手势,只保留触控和语音,满足不同用户的喜好。系统会学习用户的操作习惯,常用的指令会简化识别逻辑,越用越顺手。

好的人机交互,应当减少操作步骤,把人的精力留给工作本身。这套多模态交互方案,解决办公场景里双手受限、操作繁琐、跨设备麻烦的痛点,让办公不再被设备操作拖累,提升职场人的工作效率。
您需要登录后才可以评论 登录 | 立即注册
简体中文 - China
快速回复 返回顶部 返回列表