首页 > 专利 > 北京智产科技咨询有限公司 > 一种通过监控程序实现用户姿态检测的移动终端和方法专利详情

一种通过监控程序实现用户姿态检测的移动终端和方法   0    0

有效专利 查看PDF
专利申请流程有哪些步骤?
专利申请流程图
申请
申请号:指国家知识产权局受理一件专利申请时给予该专利申请的一个标示号码。唯一性原则。
申请日:提出专利申请之日。
2014-04-16
申请公布
申请公布指发明专利申请经初步审查合格后,自申请日(或优先权日)起18个月期满时的公布或根据申请人的请求提前进行的公布。
申请公布号:专利申请过程中,在尚未取得专利授权之前,国家专利局《专利公报》公开专利时的编号。
申请公布日:申请公开的日期,即在专利公报上予以公开的日期。
2014-10-29
授权
授权指对发明专利申请经实质审查没有发现驳回理由,授予发明专利权;或对实用新型或外观设计专利申请经初步审查没有发现驳回理由,授予实用新型专利权或外观设计专利权。
2017-06-13
预估到期
发明专利权的期限为二十年,实用新型专利权期限为十年,外观设计专利权期限为十五年,均自申请日起计算。专利届满后法律终止保护。
2034-04-16
基本信息
有效性 有效专利 专利类型 发明专利
申请号 CN201410153781.8 申请日 2014-04-16
公开/公告号 CN103927010B 公开/公告日 2017-06-13
授权日 2017-06-13 预估到期日 2034-04-16
申请年 2014年 公开/公告年 2017年
缴费截止日
分类号 G06F3/01 主分类号 G06F3/01
是否联合申请 独立申请 文献类型号 B
独权数量 1 从权数量 9
权利要求数量 10 非专利引证数量 1
引用专利数量 4 被引证专利数量 0
非专利引证 1、Alejandro Jaimes等《.Sit straight(andtell me what I did today):A human PostureAlarm and Activity Summarization System》. 《Proceedings of the 2nd ACM workshop onContinuous archival and retrieval ofpersonal experiences》.2005,;
引用专利 CN202801617U、CN103021140A、US2009324024A1、JP2010086192A 被引证专利
专利权维持 6 专利申请国编码 CN
专利事件 转让 事务标签 公开、实质审查、授权、权利转移
申请人信息
申请人 第一申请人
专利权人 北京智产科技咨询有限公司 当前专利权人 江西龙瑞科技有限责任公司
发明人 王立宁 第一发明人 王立宁
地址 北京市海淀区北四环西路9号2106-222 邮编 100191
申请人数量 1 发明人数量 1
申请人所在省 北京市 申请人所在市 北京市海淀区
代理人信息
代理机构
专利代理机构是经省专利管理局审核,国家知识产权局批准设立,可以接受委托人的委托,在委托权限范围内以委托人的名义办理专利申请或其他专利事务的服务机构。
北京国昊天诚知识产权代理有限公司 代理人
专利代理师是代理他人进行专利申请和办理其他专利事务,取得一定资格的人。
许志勇
摘要
本发明涉及终端设备,尤其涉及对用户姿态进行检测的移动终端设备和工作方法,解决用户使用终端设备时姿态不正确造成身体伤害的问题。移动终端包含姿态传感模块、用户配置输入模块、告警信号输出模块、应用程序模块、状态数据库、监控程序模块。监控程序模块中包含输入输出处理单元、姿态处理单元、状态扫描单元,周期性地扫描状态数据库,根据状态数据库中的状态数据,启动姿态处理单元。姿态处理单元根据姿态数据产生用户姿态参数,在用户姿态不正确时产生报警数据和/或姿态矫正数据。本发明通过对用户进行有效的提醒,可使用户一直维持相对正确的姿态,因此有益于用户健康。另一方面,正确的姿态能使用户较长时间使用设备。
  • 摘要附图
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图1
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图2
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图3
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图4
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图5
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图6
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图7
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图8
    一种通过监控程序实现用户姿态检测的移动终端和方法
  • 说明书附图:图9
    一种通过监控程序实现用户姿态检测的移动终端和方法
法律状态
序号 法律状态公告日 法律状态 法律状态信息
1 2021-05-14 专利权的转移 登记生效日: 2021.05.07 专利权人由江西龙瑞科技有限责任公司变更为南通优元美术图案设计有限公司 地址由344000 江西省抚州市抚州高新技术产业开发区金柅大道198号科创孵化基地中小创业企业园A1栋三楼变更为226000 江苏省南通市海门市悦来镇复兴路20号
2 2017-06-13 授权
3 2017-06-06 著录事项变更 申请人由北京尚德智产投资管理有限公司变更为北京智产科技咨询有限公司 地址由100191 北京市海淀区北四环西路9号2106-222变更为100191 北京市海淀区北四环西路9号2106-222
4 2014-10-29 实质审查的生效 IPC(主分类): G06F 3/01 专利申请号: 201410153781.8 申请日: 2014.04.16
5 2014-07-16 公开
权利要求
权利要求书是申请文件最核心的部分,是申请人向国家申请保护他的发明创造及划定保护范围的文件。
1.一种通过监控程序实现用户姿态检测的移动终端,包含姿态传感模块、用户配置输入模块、告警信号输出模块、一个或多个应用程序模块、状态数据库、监控程序模块;所述姿态传感模块产生姿态数据;
所述告警信号输出模块发出用户感官可识别的信号;其特征在于,
所述用户配置输入模块识别用户操作,产生用户指令,包含应用程序选择指令;
所述状态数据库中存储所述应用程序模块的状态数据,包含应用程序模块是否占据显示屏;
所述监控程序模块中包含输入输出处理单元、姿态处理单元、状态扫描单元;
所述输入输出处理单元与所述姿态传感模块、用户配置输入模块、告警信号输出模块相连接,接收所述姿态数据、接收所述用户指令,产生输出数据;
所述姿态处理单元根据姿态数据识别用户面部的位置,产生姿态参数,所述姿态参数包含相对姿态参数和绝对姿态参数;所述相对姿态参数包含用户面部中间线和显示屏之间的夹角或用户面部中间线偏离图像中间线的程度;所述绝对姿态参数包含用户面部中间线和水平面之间的夹角;将所述姿态参数与对应的门限值进行比较,在用户姿态不正确时产生报警数据和/或姿态矫正数据;
所述状态扫描单元周期性地扫描所述状态数据库,根据状所述态数据库中的状态数据启动姿态处理单元。

2.一种通过监控程序实现用户姿态检测的移动终端,包含姿态传感模块、用户配置输入模块、告警信号输出模块、一个或多个应用程序模块、状态数据库、处理单元库、监控程序模块;所述姿态传感模块产生姿态数据;所述告警信号输出模块发出用户感官可识别的信号;其特征在于,
所述用户配置输入模块识别用户操作,产生用户指令,包含应用程序选择指令;
所述状态数据库中存储所述应用程序模块的状态数据,包含应用程序模块是否占据显示屏;
所述处理单元库包含姿态处理单元、应用程序编程接口;
所述姿态处理单元根据姿态数据识别用户面部的位置,产生姿态参数,所述姿态参数包含相对姿态参数和绝对姿态参数;所述相对姿态参数包含用户面部中间线和显示屏之间的夹角或用户面部中间线偏离图像中间线的程度;所述绝对姿态参数包含用户面部中间线和水平面之间的夹角;将所述姿态参数与对应的门限值进行比较,在用户姿态不正确时产生报警数据和/或姿态矫正数据;
所述应用程序编程接口使姿态处理单元能够接收启动信号和数据、并输出结果;
所述监控程序模块中包含输入输出处理单元、姿态处理调用单元、状态扫描单元;
所述输入输出处理单元与所述姿态传感模块、用户配置输入模块、告警信号输出模块相连接,接收所述姿态数据、接收所述用户指令,产生输出数据;
所述姿态处理调用单元能够查询姿态处理单元在处理单元库中的位置、发出启动信号、并传递姿态检测和比较所需要的姿态数据和门限值;
所述状态扫描模块周期性地扫描状态数据库,根据状态数据库中的状态数据启动姿态处理单元。

3.如权利要求1或2所述通过监控程序实现用户姿态检测的移动终端,其特征在于,所述姿态传感模块包含摄像头及其驱动程序,产生用户姿态数据,所述摄像头为一只或多只前置摄像头;
所述姿态处理单元检测用户面部与显示屏的相对位置,产生相对姿态参数。

4.如权利要求1或2所述通过监控程序实现用户姿态检测的移动终端,其特征在于,所述姿态传感模块包含摄像头及其驱动程序,产生用户姿态数据,所述摄像头为一只或多只前置摄像头;
所述姿态传感模块中还包含能检测主显示屏所在平面倾角的本机姿态传感器及其驱动程序,产生本机姿态数据;
所述姿态处理单元根据用户姿态数据检测用户面部与显示屏的相对位置,产生相对姿态参数;
所述姿态处理单元根据本机姿态数据确定本机显示屏所在平面的倾角;
所述姿态处理模块根据相对姿态参数和本机显示屏所在平面的倾角,产生绝对姿态参数。

5.如权利要求1或2所述通过监控程序实现用户姿态检测的移动终端,其特征在于,所述状态数据包含:应用程序注册表、应用程序状态表、姿态处理标志位;
应用程序注册表,包含应用程序模块名称或标识符;
应用程序状态表,包含应用程序模块工作状态的信息:应用程序模块是否运行、是否占据显示屏;
姿态处理标志位,是指姿态处理模块是否运行的标志。

6.一种通过监控程序实现用户姿态检测的方法,用于权利要求1~2任意一项所述移动终端,其特征在于,
包括以下步骤
监控程序模块中的状态扫描单元,周期性地扫描状态数据库,根据状态数据库中的状态信息启动姿态处理单元;
监控程序模块中的输入输出处理单元控制姿态传感模块采集用户姿态,接收姿态数据;姿态处理单元对姿态数据进行分析,得出相对姿态参数和绝对姿态参数;所述相对姿态参数包含用户面部中间线和显示屏之间的夹角或用户面部中间线偏离图像中间线的程度;
所述绝对姿态参数包含用户面部中间线和水平面之间的夹角;
监控程序模块中的姿态处理单元将用户姿态参数和对应的门限值进行比较;
监控程序模块中的姿态处理单元在用户姿态不正确时,生成报警数据和/或姿态矫正数据;输入输出处理单元输出信号触发告警信号输出模块向客户发出用户感觉可识别的信号,包含报警信息和/或矫正建议。

7.如权利要求6所述通过监控程序实现用户姿态检测的方法,其特征在于,还包括以下步骤:
输入输出处理单元接收来自用户配置输入模块的指令数据,至少包括以下指令中一种应用程序选择指令,用于设置应用程序注册表;
门限指令,用于设置姿态参数门限值。

8.如权利要求6所述通过监控程序实现用户姿态检测的方法,其特征在于,还包括以下步骤:
监控程序模块中的输入输出处理单元,控制告警信号输出模块发出用户感觉可识别的信号,包含报警信息和/或矫正建议;
所述用户感官可识别的信号,采用以下一种或多种形式:通过音频模块发出来的提示音、通过振动设备发出来的振动,通过显示屏给出的图形或文字提示。

9.如权利要求6~8任一项所述通过监控程序实现用户姿态检测的方法,其特征在于,还包括以下步骤:
应用程序模块占据显示屏时,修改状态数据库中的应用程序状态表,写入该应用程序模块的名称或标识符;
监控程序装置中的状态扫描单元从状态数据库中的应用程序状态表中获得正在使用显示屏的应用程序模块名称或标识符;检查该应用程序模块是否在应用程序注册表中,如是,则启动姿态处理单元。

10.如权利要求6~8任一项所述通过监控程序实现用户姿态检测的方法,其特征在于,还包括以下步骤:
应用程序模块设置或清除状态数据库中的姿态处理标志位;
监控程序装置中的数据扫描单元查询所述姿态处理标志位是否被设置,如是,则启动姿态处理单元。
说明书

技术领域

[0001] 本发明涉及终端设备,尤其涉及对用户姿态进行检测的移动终端设备和工作方法。

背景技术

[0002] 手机、平板电脑、电子书以及笔记本电脑等移动终端设备已经在现代人的生活中非常普及。用户在使用这些设备时一般都以单手或双手手持这些设备,让设备的显示屏对着自己,进行学习、阅读、娱乐等活动。随着大量的应用程序的出现,用户每天使用这些设备的时间越来越长。例如有的用户在地铁上用手机看小说,一般连续使用时间为几十分钟;在平板电脑或手机上看视屏,经常一看就是几个小时。随着4G业务的开通,移动互联网将提供更加丰富多彩的内容,这会让我们使用这些终端设备的时间更长。
[0003] 虽然使用这些设备让我们很便捷地获得了各种信息、随时可以娱乐,但是,对这些设备的不正确使用方法也给用户带来了很多烦恼。比较典型的一个情形是,用户长时间手持这些设备后,手臂疲惫,设备越放越低,自然而然地头也越来越低。如果颈椎长期处于极度前屈的异常稳定状态,就会对颈椎造成伤害,容易造成颈肩部肌肉僵硬、痉挛,时间久了,就可能会导致颈椎曲度变直、颈椎间盘突出等病症。还有的人喜欢在地铁等拥挤的场所看手机、平板电脑或电子书,由于空间有限,这些设备与眼睛的距离很近。还有一些人习惯在休息的时候卧床阅读。这些不正确的姿态对用户的眼睛和颈椎造成了很大的伤害,而且这些伤害很多是不可逆的,需要服用药物、物理疗法乃至手术才能得到有效的治疗。
[0004] 移动终端包括但并不限于手机、平板电脑等设备,大多数呈平板形态,这种设备的硬件构成一般都有前置摄像头、显示屏和处理器及硬件外设等器件。设备包括一个或者多个显示屏,其中前置摄像头与设备的显示屏在结构上位于设备的同一几何平面。移动终端一般包括一个或多个处理器,处理器运行软件操作系统和程序,硬件和软件通过信号中断机制触发相应的处理。用户在使用这样的设备时,一般存在长时间注视显示屏的应用,例如网页阅读、游戏等。由于前述的情形,移动终端或平板电脑使用时很容易使用姿态不正确,比如距离人眼过近,头部过低等。这些不正确的姿态对用户的眼睛和颈椎造成了很大的伤害。但是目前的移动终端尚未解决这个问题。

发明内容

[0005] 本发明提出一种通过监控程序实现用户姿态检测的移动终端和方法,解决用户面对显示屏使用移动终端设备时姿态不正确造成身体伤害的问题。
[0006] 本发明通过监控程序实现用户姿态检测的移动终端,包含姿态传感模块1、用户配置输入模块2、告警信号输出模块3、一个或多个应用程序模块71,72,…,7N、状态数据库8、监控程序模块4。
[0007] 姿态传感模块1产生姿态数据D;用户配置输入模块2识别用户操作,产生用户指令I;告警信号输出模块3发出用户感官可识别的信号。
[0008] 所述状态数据库8中存储应用程序模块71,72,…,7N工作中产生的状态数据。
[0009] 所述监控程序模块4中包含输入输出处理单元41,与所述姿态传感模块1、用户配置输入模块2、告警信号输出模块3相连接,接收所述姿态数据D、用户指令I,产生输出数据O;
[0010] 所述监控程序模块4中包含姿态处理单元40,根据姿态数据D识别用户面部的位置,产生姿态参数G,将所述姿态参数G与对应的门限值T进行比较,在用户姿态不正确时产生报警数据A和/或姿态矫正数据R。
[0011] 所述监控程序模块4中包含状态扫描单元42,周期性地扫描状态数据库8,根据状态数据库8中的状态数据,启动姿态处理单元40。
[0012] 本发明所述应用程序模块71,72,…,7N,是加载和运行应用程序的装置,特别是加载和运行一些用户可能长时间连续使用的应用程序,如视频播放器、网页浏览器、阅读软件等。本发明所述监控程序模块4,是加载和运行监控程序的装置。本发明所述监控程序模块、应用程序模块等各组成部分能用CPU系统、可编程逻辑电路和存储器的组合来实现。
[0013] 在本发明的实施例中,传感信号S进一步包含图像信号S1和角度传感信号S2。姿态数据D进一步包含用户姿态数据D1和本机姿态数据D2。姿态参数G进一步包含相对姿态参数G1和绝对姿态参数G2。G1、G2对应的门限值分别为T1、T2。
[0014] 本发明终端设备用户姿态检测方法,包含如下步骤:
[0015] 配置输入:监控程序模块4接受来自用户配置输入模块2的用户指令I;
[0016] 应用程序扫描:监控程序模块4中的状态扫描单元42,周期性地扫描状态数据库8,了解所述应用程序模块71,72,…,7N的工作状态,在所述应用程序模块71,72,…,7N占用显示屏时,启动姿态处理单元40。
[0017] 姿态检测:监控程序模块4中的输入输出处理单元41控制姿态传感模块1采集用户姿态,接收姿态数据D1、D2;姿态处理单元40对姿态数据D1、D2进行分析,得出用户相对姿态参数G1和/或绝对姿态参数G2;
[0018] 姿态比较:监控程序模块4中的姿态处理单元40将姿态参数G1、G2和对应的门限值T1、T2进行比较;
[0019] 姿态提醒:监控程序模块4中的姿态处理单元40在姿态参数超出门限值时(即用户姿态不正确),生成报警数据A和/或姿态矫正数据R;监控程序模块4中输入输出处理单元41输出信号O,触发告警信号输出模块3向客户发出用户感觉可识别的信号,包含报警信息和/或矫正建议。
[0020] 上述步骤循环执行,为了降低检测的频率,还包含时延的步骤。
[0021] 运用本发明的系统和方法,通过对用户进行有效的提醒,可使用户一直维持一个比较正确的姿态。这可以让用户不会因为使用这些电子设备对身体造成伤害,因此有益于用户。另一方面,正确的姿态其实也是最不容易使用户疲惫的姿态,因此用户可以较长时间使用这些设备,从而提高用户对设备生产者和应用程序的黏着度。

附图说明

[0022] 图1是通过监控程序模块实现用户姿态检测的移动终端
[0023] 图2是姿态传感模块使用摄像头方案
[0024] 图3是姿态传感模块使用摄像头和倾角传感器方案
[0025] 图4是监控程序模块调用姿态处理单元方案示意图
[0026] 图5是摄像头在终端设备面板上的安置方案示意图
[0027] 图6是本机姿态传感器在终端设备上的安置方案示意图
[0028] 图7是通过监控程序模块4实现用户姿态检测的方法流程图
[0029] 图8是监控程序模块4扫描状态数据库8获得应用程序指令、进行姿态处理的流程图[0030] 图9是监控程序模块4扫描状态数据库8获得应用程序状态、进行姿态处理的流程图[0031] 下面结合附图,对具体实施方式说明如下。
[0032] 本发明通过应用程序实现用户姿态检测的移动终端如图1所示,包含姿态传感模块1、用户配置输入模块2、告警信号输出模块3、应用程序模块71,72,…,7N、状态数据库8、监控程序模块4。
[0033] 姿态传感模块1产生姿态数据D;用户配置输入模块2识别用户操作,产生用户指令I;告警信号输出模块3发出用户感官可识别的信号。
[0034] 本发明所述应用程序模块71,72,…,7N,是加载和运行应用程序的装置,特别是加载和运行一些用户可能长时间连续使用的应用程序,如视频播放器、网页浏览器、阅读软件等。
[0035] 所述状态数据库8中存储工作的状态数据。所述状态数据8包含“应用程序注册表”、“应用程序状态表”、“姿态处理标志位”。
[0036] 应用程序状态表,包含终端中应用程序模块工作状态的信息,例如该应用程序模块是否运行、是否占据显示屏等。
[0037] 应用程序注册表,包含有检测必要的应用程序模块名称或系统分配的某种标识符。应用程序模块71,72,…,7N可以把自己的名称或标识符添加到状态数据库8中,表示注册了姿态处理功能。
[0038] 姿态处理标志位,是指姿态处理模块40是否运行的标志。
[0039] 所述监控程序模块4中包含输入输出处理单元41,与所述姿态传感模块1、用户配置输入模块2、告警信号输出模块3相连接,接收所述姿态数据D、用户指令I,产生输出数据O。
[0040] 所述监控程序模块4中包含姿态处理单元40,根据姿态数据D识别用户面部的位置,产生姿态参数G,将所述姿态参数G与对应的门限值T进行比较,在用户姿态不正确时产生报警数据A和/或姿态矫正数据R。
[0041] 所述监控程序模块4中包含状态扫描单元42,周期性地扫描状态数据库8,了解所述应用程序模块71,72,…,7N的工作状态,在所述至少一个应用程序模块(例如71)占用显示屏时,启动姿态处理单元40。
[0042] 如图2所示,是本发明通过监控程序实现用户姿态检测的移动终端的一个实施例,姿态传感模块1包含摄像头及其驱动装置11,由一只或多只前置摄像头产生用户面部的图像信号,生成用户姿态数据D1。监控程序模块4中的输入输出处理单元41控制姿态传感模块1,接收用户姿态数据D1,姿态处理单元40检测用户面部与显示屏的相对位置,产生相对姿态参数G1,将所述姿态参数G1与对应的门限值T1进行比较,用户姿态不正确时产生报警数据A和/或姿态矫正数据R。
[0043] 如图3所示,是本发明通过监控程序实现用户姿态检测的移动终端的另一个实施例,姿态传感模块1包含摄像头及其驱动装置11,由一只或多只前置摄像头产生图像信号,生成用户姿态数据D1。姿态传感模块1中还包含能检测显示屏所在平面倾角的本机姿态传感器(如重力传感器,又称为倾角传感器)及其驱动装置12,产生角度传感信号,生成本机姿态数据D2。监控程序模块4中的输入输出处理单元41控制姿态传感模块1,接收姿态数据D1、D2。姿态处理单元40根据用户姿态数据D1检测用户面部与显示屏的相对位置,产生相对姿态参数G1;姿态处理单元40根据本机姿态数据D2确定本机显示屏所在平面的倾角α。姿态处理单元40根据相对姿态参数G1和本机显示屏所在平面的倾角α,产生绝对姿态参数G2。
[0044] 姿态处理单元40将所述姿态参数G1、G2与对应的门限值T1、T2进行比较;用户姿态不正确时产生报警数据A和/或姿态矫正数据R。
[0045] 图4作为通过监控程序实现姿态检测的移动终端的另一个实施例,是监控程序模块4调用姿态处理单元40的方案。
[0046] 此时,移动终端5中存在一个处理单元库9,所述处理单元库9中包含姿态处理单元40、及其他处理单元(例如91)。所述姿态处理单元40根据姿态数据D检测用户的姿态,产生姿态参数G,将所述姿态参数G与对应的门限值T进行比较,在用户姿态不正确时产生报警数据A和/或姿态矫正数据R。处理单元库9中还包含一个应用程序编程接口(API)90,使所述姿态处理单元40和其他处理单元(例如91)能够接收启动信号和数据,并输出结果。
[0047] 监控程序模块4中包含输入输出处理单元41、状态扫描单元42、姿态处理调用单元43。所述输入输出处理单元41与所述姿态传感模块1、用户配置输入模块2、告警信号输出模块3相连接,接收所述姿态数据D、用户指令I,产生输出数据O。所述状态扫描单元42,周期性地扫描状态数据库8,了解所述应用程序模块71,72,…,7N的工作状态,在所述应用程序模块中至少一个(例如71)占用显示屏时,启动姿态处理调用单元43。所述姿态处理调用单元
43,能够查询姿态处理单元40在处理单元库9中的位置、发出启动信号、并传递姿态检测和比较所需要的数据(包括姿态数据D1、D2和门限值T1、T2),并返回报警数据A和姿态矫正数据R。
[0048] 与图4所示实施例相对应,例如采用在Android操作系统中增设库函数的方案。在Android系统运行装置中,将实现姿态检测、姿态比较、姿态提醒功能的姿态处理单元40作为一个本地库(Library)运行装置的一部分,以库函数运行装置的方式存在,并在应用框架(Application Framework)中提供一个API,该API可以向其它应用程序模块提供当前用户的姿态是否正确的判断。监控程序模块4通过调用库函数运行装置完成本发明实现的功能。
[0049] 再例如在iOS操作系统中增设库函数。在iOS系统运行装置中,以库函数运行装置的方式实现姿态处理单元40,包含姿态检测、姿态比较、姿态提醒功能,作为媒体层或核心服务层的一部分,并在CocoaTouch中提供一个API,该API可以向监控程序模块4提供当前用户的姿态是否正确的判断。监控程序模块4通过调用库函数运行装置完成本发明实现的功能。
[0050] 还有在第三方开发工具中库函数的方案。以库函数运行装置的方式实现姿态处理单元40,包含姿态检测、姿态比较、姿态提醒功能,这样用户开发的装置可以直接调用与该函数库运行装置有关的API。本发明所述监控程序模块4通过调用库函数运行装置完成本发明实现的功能。
[0051] 在上述各方案实施例中所提到的“姿态参数”,可以用多种方法定义,以下举例说明定义和分析的方法。本发明的装置和方法不限定姿态参数的具体方式。
[0052] 例如一种姿态参数是:用户面部参考点与终端显示屏参考点之间的水平距离L1、垂直距离L2,用户面部中间线和显示屏之间的夹角β,用户面部中间线和水平面之间的夹角γ。其中L1、L2、β反映了用户面部与终端显示屏之间的相对位置关系,因此称为“相对姿态参数G1”,其中γ反映了用户面部与终端显示屏无关的位置参数,称为“绝对姿态参数G2”。即:G1=[L1,L2,β],G2=γ=α+β。参数G1可以运用摄像头及其驱动装置11输出的用户姿态数据D1使用单目机器视觉、双目机器视觉或多目机器视觉的方法得到,G2结合G1和本机显示屏所在平面的倾角α得到。
[0053] 再例如一种姿态参数是:在摄像头图像数据用户面部轮廓线中占据的范围Af、及面部中间线偏离图像中间线的程度d,用户面部中间线和水平面之间的夹角γ,也可以构建相对姿态参数,即G1=[Af,d,β]。参数G1可以运用摄像头及其驱动装置11输出的用户姿态数据D1使用图像数据分析的方法得到。绝对姿态参数仍可采用G2=γ=α+β。
[0054] 对应的门限值T是指G1、G2中标定正确姿态的门限值,例如L1、L2、Af、α、β、γ的最大值或最小值。按照前述姿态参数的实施例,相对姿态参数的门限值T1=[Min(L1),Max(L1),Min(L2),Max(L2),Min(β),Max(β)],或者T1=[Min(Af),Max(Af),Max(d),Min(β),Max(β)];绝对姿态参数的门限值T2=[Min(α),Max(α),Min(γ),Max(γ)]。所谓用户姿态不正确,是指用户的姿态参数超出门限值的范围。
[0055] 图5和图6表示摄像头11和本机姿态传感器12在移动终端的安置方案。其中,图5表示摄像头在终端设备面板上的位置和功能,一个移动式智能终端设备5使用时大致呈平板状,有一个或多个面向用户的摄像头11。还要至少包含一个面向用户的显示屏6,使用户在面向设备阅读或工作时面向摄像头11、处于摄像头的图像采集空间中。图6表示姿态传感器12在终端设备5上的位置和功能。该设备的硬件包含至少一个面向用户的显示屏6和一个能检测出显示屏所在平面倾角的传感器12。该传感器安装在终端设备中,与显示屏6具有固定的位置关系。通过该传感器输出的数据,可以得到终端设备的显示屏所在平面的倾角α,即终端设备的显示屏所在平面和水平面之间的夹角,作为本机姿态参数。
[0056] 通过监控程序模块4实现用户姿态检测的方法如图7所示,包含如下步骤:
[0057] 第101步、配置输入:监控程序模块4中输入输出处理单元41接受来自用户配置输入模块2的用户指令I;
[0058] 第102步、应用程序扫描:监控程序模块4中的状态扫描单元42,周期性地扫描状态数据库8,根据状态数据库8的信息启动姿态处理单元40。
[0059] 第103步、姿态检测:监控程序模块4中的输入输出处理单元41控制姿态传感模块1采集用户姿态,接收姿态数据D1、D2;姿态处理单元40对姿态数据D1、D2进行分析,得出用户相对姿态参数G1和/或绝对姿态参数G2;
[0060] 第104步、姿态比较:监控程序模块4中的姿态处理单元40将姿态参数G1、G2和对应的门限值T1、T2进行比较,姿态正确时转第2步,否则第5步;
[0061] 第105步、姿态提醒:监控程序模块4中的姿态处理单元40在用户姿态不正确的时候,生成报警数据A和/或姿态矫正数据R;监控程序模块4中输入输出处理单元41输出信号(O)触发告警信号输出模块3向客户发出用户感觉可识别的信号,包含报警信息和/或矫正建议,告警输出后,转第2步。
[0062] 在上述方法中,循环执行的方式从第4步、第5步回归到第2步时,可包含一个时延的步骤。
[0063] 以下各个实施例是在上述工作方法的基础上,对第2~4步在移动终端中的具体实现方式给出多种方案。
[0064] 图8是监控程序模块4扫描状态数据库8获得应用程序指令、进行姿态处理的流程图。姿态处理单元40实现姿态检测、姿态比较、姿态提醒的功能。监控程序模块4与应用程序模块71,72,…,7N并列运行,应用程序模块71,72,…,7N中任一个在占用显示屏、且有必要对用户进行姿态检测时(例如长期处于浏览状态时候),在状态数据库8中设置“姿态处理标志位”,用于启动姿态处理单元40,应用程序模块退出显示屏或其它不需要对姿态进行检测的情况发生时清除该标志位。
[0065] 图8(a)表示应用程序模块71,72,…,7N的工作过程的一个段落,步骤如下:
[0066] 第201步、任意一个应用程序模块(例如71)设置或清除应用数据库8中的“姿态处理标志位”;
[0067] 第202步、应用程序模块(例如71)运行应用程序主功能;
[0068] 图8(b)表示监控程序模块的工作过程,步骤如下:
[0069] 第203步、状态扫描单元42查询状态数据库8,确认姿态处理标志位是否被设置?如果是则进入第204步,启动姿态处理单元40,否则转第207步;
[0070] 第204步、姿态检测:监控程序模块4中的输入输出处理单元41控制姿态传感模块1采集用户姿态,接收姿态数据D1、D2;姿态处理单元40对姿态数据D1、D2进行分析,得出相对姿态参数G1和/或绝对姿态参数G2;
[0071] 第205步、姿态比较:姿态处理单元40将所述姿态参数G1、G2和门限值T1、T2进行比较,姿态正确时转第207步,否则进入第206步;
[0072] 第206步、姿态提醒:姿态处理单元40在所述姿态参数G1、G2超过门限值时T1、T2,生成报警数据A和/或姿态矫正数据R;输入输出处理单元41输出信号O触发告警信息输出模块3;
[0073] 第207步、等待,延时后转第203步。
[0074] 图9是监控程序模块4扫描状态数据库8获得应用程序状态、进行姿态处理的流程图。姿态处理单元40实现姿态检测、姿态比较、姿态提醒功能。应用程序模块71,72,…,7N在占据显示屏时,将应用程序模块的名称或标识符写入状态数据库8,形成应用程序状态表。监控程序模块4中的状态扫描单元42在运行中取得“应用程序注册表”,确定注册监控功能的应用程序模块;如果该占用显示屏的应用程序模块在名称或标识符在应用程序注册表中,则触发姿态处理单元。
[0075] 图9(a)表示应用程序模块71,72,…,7N的工作过程的一个段落,步骤如下:
[0076] 第301步、应用程序模块(例如71)在占用显示屏的时候,通过应用程序编程接口设置或清除应用数据库44中的“应用程序状态表”;
[0077] 第302步、应用程序模块(例如71)运行应用程序主功能;
[0078] 图9(b)表示监控程序模块的工作过程,步骤如下:
[0079] 第303步、状态扫描单元42查询状态数据库,确认正在使用显示屏的应用程序模块名称或标识符是否在“应用程序注册表”中?如果是则进入第304步,启动姿态处理单元40,否则转第307步;
[0080] 第304步、姿态检测:监控程序模块4中的输入输出处理单元41控制姿态传感模块1采集用户姿态,接收姿态数据D1、D2;姿态处理单元40对姿态数据D1、D2进行分析,得出相对姿态参数G1和/或绝对姿态参数G2;
[0081] 第305步、姿态比较:姿态处理单元40将所述姿态参数G1、G2和门限值T1、T2进行比较,姿态正确时转第307步,否则进入第306步;
[0082] 第306步、姿态提醒:姿态处理单元40在所述姿态参数G1、G2超过门限值时T1、T2,生成报警数据A和/或姿态矫正数据R;输入输出处理单元41输出信号O触发告警信息输出模块3;
[0083] 第307步、等待,延时后转第303步。
[0084] 针对上述各个实施例,具体说明用户功能设置方案。监控程序模块4中的输入输出处理单元41接收来自用户配置输入模块2的用户指令。指令数据至少包括以下指令中一种:1.应用程序选择指令,用户设置“应用程序注册表”。只有前台运行这些应用程序时该后台服务才进行姿态检测。某些应用程序模块也可以自己主动加入到这个列表中。通过设置让该功能在某些应用中不被启用。如前台应用程序是接听、拨打电话、听收音机或其它音频内容时,由于此时用户不会长时间关注显示屏,此时不必要开启本功能。2.门限指令,用户设置姿态参数门限值。通过设置门限值适应不同用户的需求。在没有用户指令时,上述设置也可以是在姿态处理单元40或姿态处理调用单元43中存在默认设置,通过用户配置输入模块
2进行手动设置或修改。
[0085] 针对上述各个实施例,具体说明告警输出方案。告警信号输出模块3,处理报警数据A和姿态矫正数据R。这些数据包含在监控程序模块4的输入输出处理单元41输出信号O中。报警数据是指姿态参数超出门限值时生成的,包含报警的方式、报警的强度、报警的时间长短等特征,这些数据是根据用户偏离正确姿态的程度和时间来确定的。姿态矫正数据是根据姿态参数和门限值之间的差,得到如何改变用户姿态以达到正确姿态的数据,包括距离、角度、及调整的方向等信息。报警输出模块输出的信号是用户感官可识别的信号,包含以下一种或多种类型:通过音频模块发出来的提示音、通过振动设备发出来的振动,通过显示屏给出的图形或文字提示。
版权所有:盲专网 ©2023 zlpt.xyz  蜀ICP备2023003576号