Login| Sign Up| Help| Contact|

Patent Searching and Data


Title:
CONTROL METHOD BASED ON ELECTROMYOGRAPHIC SIGNAL AND SENSOR SIGNAL FOR IMPLEMENTING FINE REAL-TIME MOTION
Document Type and Number:
WIPO Patent Application WO/2014/194609
Kind Code:
A1
Abstract:
The present invention relates to a control method based on an electromyographic signal and a sensor signal for implementing a fine real-time motion, and belongs to the field of a cross technology of electronic science and clinical medicine. The control method mainly comprise the ideas: generating, by means of a stimulation pulse generation algorithm, a stimulation signal by using an electromyographic signal generated in a healthy limb movement process and collected by a body surface electrode and by using a finger bending degree signal collected by a bending degree sensor; using bending degree information as a channel triggering signal of the stimulation signal of the muscle; and outputting the generated stimulation signal to a muscle stimulation position point related to a controlled user, and stimulating a specific portion of a corresponding limb of the user, so as to implement control of a fine and real-time motion and achieve accurate copying and rebuilding of a motion.

Inventors:
WANG ZHIGONG (CN)
ZONG SIHAO (CN)
LV XIAOYING (CN)
XU JIAN (CN)
WANG SUYANG (CN)
Application Number:
PCT/CN2013/087570
Publication Date:
December 11, 2014
Filing Date:
November 21, 2013
Export Citation:
Click for automatic bibliography generation   Help
Assignee:
NANJING SENCECHIP MEDCIAL DEVICES CO LTD (CN)
UNIV SOUTHEAST (CN)
International Classes:
G06K9/62
Foreign References:
CN101732796A2010-06-16
CN201642503U2010-11-24
CN102949783A2013-03-06
Attorney, Agent or Firm:
NANJING RUIHONG PATENT & TRADEMARK OFFICE (ORDINARY PARTNERSHIP) (CN)
南京瑞弘专利商标事务所(普通合伙) (CN)
Download PDF:
Claims:
权利要求书

1. 一种基于肌电信号和传感器信号实现精细实时运动的控制方法, 其特征 在于, 包括以下步骤: 步骤一, 采用弯曲度传感器采集主控者各肢体动作的弯 曲度信息,同时通过体表探测电极采集此刻主控者肢体动作致使相关肌肉上产生 的对应肌电信号; 步骤二, 通过功能电激励系统, 该功能电激励系统集成有刺激 脉冲生成算法,所述刺激脉冲生成算法将步骤一所述弯曲度信息对应的肌电信号 生成刺激脉冲信号,所述功能电激励系统通过步骤一所述的弯曲度信息作为对应 肢体动作的刺激脉冲信号的通道触发信号; 步骤三、 被控者通过肌电刺激电极, 对相应的肌肉施加步骤二获得的刺激脉冲信号,以促使被控者肢体按照步骤一所 述主控者肢体的弯曲度信息动作。

2. 根据权利要求 1 所述基于肌电信号和传感器信号实现精细实时运动的控 制方法, 其特征在于: 所述刺激脉冲生成算法是指将肌电信号生成幅度、频率都 与采集的电信号成正比的刺激信号的算法。

3. 根据权利要求 2所述基于肌电信号和传感器信号实现精细实时运动的控 制方法, 其特征在于: 所述肌电信号是指通过放大、 滤波、 A/D转换电路处理过 的肌电信号; 所述弯曲度信息是指通过 A/D转换电路处理过的弯曲度信息。

4. 根据权利要求 3所述基于肌电信号和传感器信号实现精细实时运动的控 制方法, 其特征在于: 所述通道触发信号的判断方法为: 首先设定一个阈值, 当 弯曲度传感器收集信号低于阈值时,就认为发生了弯曲, 进而在对相应的输出通 道选择进行脉冲刺激。

5. 根据权利要求 4所述基于肌电信号和传感器信号实现精细实时运动的控 制方法, 其特征在于: 当主控者所做的动作为手指运动时, 所述弯曲度传感器设 置于五根手指的背面; 采集肌电信号的手指数至少两根, 刺激脉冲信号可通过该 肌电信号拟合再通过刺激脉冲生成算法生成。

6. 根据权利要求 5所述基于肌电信号和传感器信号实现精细实时运动的控 制方法,其特征在于: 所述刺激脉冲生成算法集成在 MSP430系列微处理单片机 上。

Description:
说明书

一种基于肌电信号和传感器信号实现精细实 时运动的控制方法 技术领域

[0001] 本发明是一种基于肌电信号和弯曲度传感器实 现精细到手指的实时运动控制方法, 属于电子科学与临床医学的交叉技术领域。

背景技术

[0002] 偏瘫病人肢体动作功能的丧失给他们自身及家 庭乃至社会带来巨大的痛苦和负担。 瘫痪肢体动作功能的重建, 一直是康复医学重点研究的目标。 多年以来, 国内外的科学家 们为瘫痪病人设计了众多控制肢体动作的功能 电刺激装置, 主要分为植入式的和非植入式 两大类。 植入式无可避免地为患者带来手术的困扰, 而非植入式的功能电刺激由于通道数 目少, 无法达到精确的控制。 重要的是, 无论是植入式的还是非植入式的刺激系统, 由于 对各种动作的神经及肌电编码的认知缺失, 只能通过人工构想的脉冲编码作为控制信号产 生简单重复的肢体动作, 这些动作和正常人肢体动作的自由度和和谐度 相去甚远。 由于健 康肢体肌电信号真实反映着实时的肌肉活动方 式, 利用健康肢体动作时产生的肌电信号作 为再生的刺激信号, 就弥补了现有功能电刺激系统的缺陷。

[0003] 在 ZL 200510135541.6的发明专利中, 提出了 "微电子系统辅助神经信道功能恢复 方法及其装置", 用于受损脊髓神经的信道桥接、 信号再生和功能重建。 这一专利要处理 的是动作和感觉的神经电位脉冲序列 (编码)。 该发明专利的特征是: 1 ) 应用目标是同体 受损的脊髓神经, 2) 采用近距离有线的生物神经 -电子接口, 3) 装置需要手术植入 在专利号为 201210342507.6,公开了一种基于肌电信号通信机 的瘫痪肢体功能重建方法 及其装置的发明专利中, 该重建装置包括探测电极阵列、 信号处理电路、 通信信道、 激励 信号生成电路和刺激电极阵列。 所述的探测电极阵列采用多个探测电极和一个 共用参考电 极的单端形式,或采用两两配对的差动形式。 此装置可用于任何需要动作功能重建的场合, 包括脊髓损伤的瘫痪病人动作功能重建, 中风导致的偏瘫病人动作功能重建, 健康人的动 作训练等等。

[0004] 上述重建装置可以将采集到的健康肢体动作时 产生的多通道肌电信号, 经过信号处 理, 以有线或无线的通信方式传送至瘫痪肢体上的 功能电激励系统, 利用刺激波形生成算 法生成多通道的刺激电信号, 施加于穿戴在瘫痪肢体上的刺激电极阵列, 产生与肌电信号 采集肢体相似的和谐动作, 达到瘫痪肢体动作功能重建的目的。 但是由于肌电信号采集和 处理的复杂性, 对于精细动作, 尤其是手部的精细动作, 很难将相应的肌电信号进行多路 分离, 影响了判断动作的准确性。 而且由于肌电信号是一个很容易受干扰的模拟 信号, 对 环境要求很高, 在高噪声的环境中, 容易混入其他噪声, 使得动作识别结果不准确。 发明内容

[0005] 本发明针对上述问题的不足,提出一种基于肌 电信号和传感器信号实现精细实时运 动的控制方法, 采用弯曲度传感器采集主控者各肢体动作的弯 曲度信息, 同时通过体表探 测电极采集此刻主控者肢体动作致使相关肌肉 上产生的对应肌电信号, 将肌电信号通过刺 激脉冲生成算法生成刺激脉冲信号; 将弯曲度信息作为该肌肉的刺激脉冲信号的通 道触发 信号; 然后被控者通过肌电刺激电极, 对相应的肌肉施加获得的刺激脉冲信号, 以促使被 控者肢体按照主控者肢体的弯曲度信息动作, 实现精细到手指的实时动作控制, 达到动作 的准确复制和重建。

[0006] 本发明为解决上述技术问题提出的技术方案是 : 一种基于肌电信号和传感器信号实 现精细实时运动的控制方法, 包括以下步骤: 步骤一, 采用弯曲度传感器采集主控者各肢 体动作的弯曲度信息, 同时通过体表探测电极采集此刻主控者肢体动 作致使相关肌肉上产 生的对应肌电信号; 步骤二, 通过功能电激励系统, 该功能电激励系统集成有刺激脉冲生 成算法, 所述刺激脉冲生成算法将步骤一所述弯曲度信 息对应的肌电信号生成刺激脉冲信 号, 所述功能电激励系统通过步骤一所述的弯曲度 信息作为对应肢体动作的刺激脉冲信号 的通道触发信号; 步骤三、 被控者通过肌电刺激电极, 对相应的肌肉施加步骤二获得的刺 激脉冲信号, 以促使被控者肢体按照步骤一所述主控者肢体 的弯曲度信息动作。

[0007] 优选的: 所述刺激脉冲生成算法是指将肌电信号生成幅 度、 频率都与采集的电信号 成正比的刺激信号的算法。

[0008] 优选的: 所述肌电信号是指通过放大、 滤波、 A/D转换电路处理过的肌电信号; 所 述弯曲度信息是指通过 A/D转换电路处理过的弯曲度信息。

[0009] 优选的: 所述通道触发信号的判断方法为: 首先设定一个阈值, 当弯曲度传感器收 集信号低于阈值时, 就认为发生了弯曲, 进而在对相应的输出通道选择进行脉冲刺激。

[0010] 优选的: 当主控者所做的动作为手指运动时, 所述弯曲度传感器设置于五根手指的 背面; 采集肌电信号的手指数至少两根, 刺激脉冲信号可通过该肌电信号拟合再通过刺 激 脉冲生成算法生成。

[0011] 优选的: 所述刺激脉冲生成算法集成在 MSP430系列微处理单片机上。

[0012] 本发明的一种基于肌电信号和传感器信号实现 精细实时运动的控制方法,相比于现 有技术,具有以下有益效果: 由于采用弯曲度传感器采集主控者各肢体动作 的弯曲度信息, 同时通过体表探测电极采集此刻主控者肢体动 作致使相关肌肉上产生的对应肌电信号, 将 肌电信号通过刺激脉冲生成算法生成刺激脉冲 信号; 将弯曲度信息作为该肌肉的刺激脉冲 信号的通道触发信号; 然后被控者通过肌电刺激电极, 对相应的肌肉施加获得的刺激脉冲 信号, 以促使被控者肢体按照主控者肢体的弯曲度信 息动作, 实现精细到手指的实时动作 控制, 达到动作的准确复制和重建, 因此本发明加入传感器信号作为辅助, 来提高识别精 细动作的准确性, 尤其是手部的精细动作。 以肌电信号为主, 传感器信号为辅, 对两者综 合操作, 使用采集到的肌电信号通过刺激脉冲生成算法 生成相关的刺激脉冲序列, 使得输 出刺激脉冲与原始肌电信号相关; 同时使用传感器信号作为通道触发信号, 采集肢体动作 弯曲度信息判定哪些肢体发生运动, 来选择相对应的输出刺激肢体, 将刺激脉冲输出至被 控者相对应的肌肉位点来对不同的肌肉神经进 行与主控者动作强度对应的刺激, 实现精细 实时控制。 另外这样做的好处在于解决了单靠肌电信号无 法识别精细动作的缺点, 同时系 统中的肌电信号弥补了传感器信号无法采集运 动强度的问题, 两者信息融合可以成功地完 成动作的发生和强度记录, 将一个完整动作的要素记录还原, 并可以将其复制出来, 从而 达到精细、 实时运动控制的目的。

附图说明

[0013] 图 1是实现基于肌电信号和传感器信号实现精细 手指的实时运动控制方法的系统 示意图。

[0014] 图 2是弯曲度传感器在手上的分布示意图。

[0015] 图 3是弯曲度传感器采集信号的电路图。

[0016] 其中 1代表手指, 2代表弯曲度传感器。

具体实施方式

[0017] 附图非限制性地公开了本发明一个优选实施例 的结构示意图, 以下将结合附图详细 地说明本发明的技术方案。

实施例

[0018] 本实施例的一种基于肌电信号和传感器信号实 现精细实时运动的控制方法, 如图 1-3所示, 包括以下步骤: 第一步, 采用弯曲度传感器采集主控者各肢体动作的弯 曲度信息, 同时通过体表探测电极 采集此刻主控者肢体动作致使相关肌肉上产生 的对应肌电信号;

第二步, 通过功能电激励系统, 该功能电激励系统集成有刺激脉冲生成算法, 所述刺激脉 冲生成算法将步骤一所述弯曲度信息对应的肌 电信号生成刺激脉冲信号, 所述功能电激励 系统通过步骤一所述的弯曲度信息作为对应肢 体动作的刺激脉冲信号的通道触发信号; 所 述肌电信号是通过放大、 滤波、 A/D转换电路处理过; 所述刺激脉冲生成算法是指将肌电 信号生成幅度、 频率都与采集的肌电信号成正比的刺激信号。

[0019] 将弯曲度信息作为该肌肉的刺激信号的通道触 发信号, 所述弯曲度信息是指通过 A/D转换电路处理过的弯曲度信息。 该通道触发信号用于选择刺激信号相应的输出 刺激通 道; 所述通道触发信号的选取方法为: 首先设定一个阈值, 当弯曲度传感器收集信号低于 阈值时, 就认为发生了弯曲, 进而在对相应的输出通道选择进行脉冲刺激。

[0020] 第三步,被控者通过肌电刺激电极,对相应的 肌肉施加步骤二获得的刺激脉冲信号, 以促使被控者肢体按照步骤一所述主控者肢体 的弯曲度信息动作。

[0021] 当主控者所做的动作为手指运动时, 本发明是这样做的: 将弯曲度传感器设置于五 根手指的背面; 将体表探测电极分别置在手指的各个肌肉探测 点上; 将肌电刺激电极置在 被控者手指的各个肌肉刺激点上; 由于有五根手指, 因此可将肌电信号分成五个通道, 该 五个通道分别对应五根手指 (拇指、 食指、 中指、 无名指和小指), 当主控者手指运动时, 通过第一步, 即弯曲度传感器采集主控者五根手指动作的弯 曲度信息, 同时通过体表探测 电极采集此刻主控者五根手指动作致使各手指 肌肉上产生的对应肌电信号; 然后经过第二 步, 通过功能电激励系统, 将步骤一所述各个手指的弯曲度信息对应的肌 电信号生成刺激 脉冲信号, 所述功能电激励系统通过步骤一所述各个手指 的弯曲度信息作为对应手指动作 的刺激脉冲信号的通道触发信号, 该通道触发信号的选取方法为: 首先设定一个阈值, 当 手指上的弯曲度传感器收集信号低于阈值时, 就认为发生了弯曲, 进而在对相应的手指输 出通道选择进行脉冲刺激; 最后在经过第三步, 被控者通过肌电刺激电极, 对相应的手指 肌肉施加步骤二获得的刺激脉冲信号, 以促使被控者手指按照步骤一所述主控者手指 的弯 曲度信息动作。 比如若主控者做了弯曲食指的动作, 这时食指上的弯曲度传感器的阻抗发 生改变, 输出电压值改变, 经过 AD后送入功能电激励系统, 功能电激励系统的算法会监 测到对应于食指的传感器信号发生了变动, 而其他传感器信号都没有变动, 就可以判断出 主控者手部的动作是食指弯曲, 就可以产生让被控者食指弯曲的相应的刺激脉 冲。 在手指 运动过程中, 体表探测电极可以只测量两根手指动作生成的 肌电信号, 即只测量两通道的 肌电信号, 而刺激脉冲信号可通过该肌电信号拟合再通过 刺激脉冲生成算法生成, 而手指 的动作可通过弯曲度传感器判定。

[0022] 本发明的原理: 一种基于肌电信号和传感器信号实现精细到手 指的实时运动控制方 法, 其核心思想在于: 采集主控者动作相关肌肉上的肌电信号, 通过刺激脉冲生成算法生 成相关的刺激脉冲序列, 再利用弯曲度传感器采集到的各个手指弯曲度 信息作为通道触发 信号, 选择相应的输出刺激通道, 将生成的刺激脉冲序列输出至被控者相关的肌 肉刺激位 点上, 从而实现对不同的目标肌肉神经进行与源神经 /肌电信号相关的功能电刺激, 实现精 细到手指的精细动作实时控制。

[0023] 传感器信号由弯曲度传感器采集而来。弯曲传 感器的原理是弯曲程度的改变导致自 身阻抗的改变, 进而达到感知弯曲程度的目的。 通过这些信号建立还原算法, 可以通过精 确测量每一根手指的弯曲度和手指之间的相对 运动, 还原手部的动作。

[0024] 传感器信号的引入主要是为了解决精细动作的 识别问题, 单单依靠肌电信号可以识 别一些粗大动作如抓握, 但是对于手指的运动, 单靠肌电信号很难识别, 引入弯曲度传感 器可以监测每一根手指的运动弯曲状况, 进而达到识别精细动作的目的。

[0025] 肌电信号是通过放大、 滤波、 A/D转换电路采集的人体特定部位的肌电信号。 采集 后送入信号处理电路, 一般根据相应动作的复杂程度来决定选取多少 路的肌电信号, 本发 明选取两路肌电信号再配合传感器信号就足以 达到很好的效果。

[0026] 将弯曲度传感器信号作为开关信号, 具体做法是设定一个阈值, 当弯曲度传感器收 集信号低于阈值时, 就认为手指发生了弯曲, 进而在对相应的输出通道进行脉冲刺激, 达 到主控者受控者同步的目的。

[0027] 采集特定肌肉上的肌电信号通过刺激脉冲生成 算法生成相关的刺激脉冲序列, 具体 是指通过采集主控者特定肌肉上的肌电信号, 利用算法生成幅度、 频率都与采集到的肌电 信号成正比的刺激脉冲序列, 使得输出信号与采集到的主控者的肌电信号相 关且成正比, 当主控者动作幅度大时, 产生的肌电信号较大, 输出刺激脉冲也相应较大, 使得主控者和 受控者之间有良好的反馈关联。

[0028] 精确到手指运动的精细动作控制是指将利用传 感器信号和肌电信号产生的多路刺 激脉冲来刺激被控者的特定肌肉位点, 就可以让相应对象进行精确的运动, 这种运动的精 细程度可以达到单根手指运动的级别。

[0029] 实时是指在采集者做出动作后, l-2s 内受刺激对象就可以做出相应的精细动作响 应。 信号采集处理以及算法是一个非常快的过程, 其耗时在毫秒级别, 主要的延时产生于 肌肉对于刺激脉冲的响应时间, 因为信号要经过一定时间才能产生让肌肉运动 的能量, 尤 其在比较微弱的动作情况下, 这种延时会更为明显。 幅度较大的动作如抓握则延时较短, 刺激对象的动作与采集对象的动作是几乎同步 的。

[0030] 刺激脉冲生成算法是通过单片微型计算机实现 的, 在实验中, 采用的是 TI公司的 MSP430 系列微处理器, 采用其他系列的微处理器可以同样实现相同的 算法。 在算法处理 后, 将生成的刺激脉冲信号输入到刺激电路中, 由刺激电路产生最终的刺激脉冲波形, 并 通过体表电极将刺激脉冲输出至人体相应运动 肌肉的敏感控制位点。

[0031] 基于肌电信号和传感器实现精细到手指运动控 制的方法可以实现健康人带动瘫痪 病人实时的做精细动作, 或者瘫痪病人健康肢体带动瘫痪肢体进行实时 的相同的精细动 作, 或者健康人带动一个或者多个健康人进行实时 的精细动作, 实现动作的准确复制和重 建, 无论是对瘫痪病人的康复还是健康人的操作训 练, 这些功能都可以产生积极的帮助 本发明的特点在于: 引入肌电信号和传感器信号相互融合的理念, 采集肌电信号生成相应 的刺激脉冲序列, 加入传感器信号作为开关信号来选择输出通道 , 通过两者的融合, 可以 识别动作的发生和强度, 并将结果输出至特定的受刺激肌肉, 使之产生相同的运动。 这样 做的好处在于解决了单靠肌电信号无法识别精 细动作的缺点, 同时系统中的肌电信号弥补 了传感器信号无法采集运动强度的问题, 两者信息融合可以成功地完成动作的发生和强 度 记录, 将一个完整动作的要素记录还原, 并可以将其复制出来, 从而达到精细到手指的实 时运动控制。 用这种方法可以让健康人带动瘫痪病人做实时 精细动作, 或者瘫痪病人健康 肢体带动瘫痪肢体进行实时的相同的精细动作 , 或者健康人带动一个或者多个健康人进行 精细动作,实现动作的准确复制和重建,无论 是对瘫痪病人的康复还是健康人的操作训练, 这些功能都可以有积极的帮助。

[0032] 本发明的具体实施案例,利用该方法实现健康 人带动瘫痪病人进行实时精细运动的 实例。 首先, 利用体表电极采集主控者特定肌肉的肌电信号 , 通过 AD转化后变为数字信 号。 同时, 利用弯曲度传感器信号采集主控者手指的运动 信息, 其弯曲度传感器在手上的 分布如图 2所示, 其采集信号的电路图如图 3所示。 通过这种分布, 可以监测每一根手指 的弯曲度信息, 进而还原出手部的精确动作。 根据传感器特性, 用图 4中的电路来将传感 器采集的模拟信号转化为数字信号, 其中 Rf 代表弯曲度传感器, 传感器会随着弯曲度的 变化而改变自身阻抗, 进而改变输出电压, 在经过 AD转换后就可以将弯曲度的信息用电 压来表现。

[0033] 然后, 将通过 AD转化肌电和传感器两种数字信号送入 MCU中。 样机中 MCU采 用的 TI公司出品的 MSP430F169单片机。 在单片机上用软件编写相应的算法, 主要是利 用传感器采集到的弯曲度信息来判断当前的手 部姿势, 每一根手指的弯曲程度, 通过前后 弯曲程度的改变来判断是否有动作发生, 构成输出刺激脉冲的选通条件 (触发条件)。 当 有特定动作发生时, 才会有相应的刺激脉冲发生, 比如主控者做了弯曲食指的动作, 这时 传感器的阻抗发生改变, 输出电压值改变, 经过 AD后送入 MCU中, MCU中的算法会监 测到对应于食指的传感器信号发生了变动, 而其他传感器信号都没有变动, 就可以判断出 主控者手部的动作是食指弯曲, 就可以产生让被控者食指弯曲的相应的刺激脉 冲。 同时, MCU中的脉冲刺激生成算法根据采集到的肌电信 号大小来产生相应强度的刺激脉冲序列: 当肌电信号强时, 就产生强的刺激脉冲, 当肌电信号弱时, 则产生弱的刺激脉冲。 通过肌 电信号和传感器信号的融合处理, 可以很好地实现主控者和被控者动作的同步, 使系统既 可以判断刺激种类, 又可以判断刺激强度, 达到实时精细动作控制的目的。

[0034] 刺激电路主要是根据前面算法中的关键指标来 决定刺激脉冲的幅值大小和脉宽长 短, 通过刺激人体的对应位点可以达到让人做出特 定动作的目的。

[0035] 通过上述步骤, 主控者做出动作, 在很短的时间内, 受控者就会做出相同的动作, 这对不论是瘫痪病人的康复还是健康人的操作 训练, 都可以有积极的帮助。

[0036] 为了克服依靠纯肌电信号来识别动作的困难, 在此加入传感器信号作为辅助, 来提 高识别精细动作的准确性, 尤其是手部的精细动作。 在这个改进版的系统中, 以肌电信号 为主, 传感器信号为辅, 对两者进行一个 "与"算法操作, 进而通过算法来对不同的肌肉 神经进行与控制强度对应的刺激, 实现精细到手指运动的实时控制。

[0037] 除上述针对瘫痪病人康复医学的应用, 在体育运动员的训练, 钢琴等乐器的练习和 各种器械的操作训练等过程中, 动作的准确复制和重建也有应用价值。 设想一下, 如果能 够摆脱难以理解的口头传授的动作要领, 精确的做出教练和老师要求的标准技术动作, 无 疑节省了大量的训练时间, 更快地培养出优秀的运动员、 演奏家、 技术人员和熟练工人。

[0038] 上面结合附图所描述的本发明优选具体实施例 仅用于说明本发明的实施方式, 而不 是作为对前述发明目的和所附权利要求内容和 范围的限制, 凡是依据本发明的技术实质对 以上实施例所做的任何简单修改、 等同变化与修饰, 均仍属本发明技术和权利保护范畴。