• 四川郎酒股份有限公司获第十二届人民企业社会责任奖年度环保奖 2019-05-13
  • 银保监会新规剑指大企业多头融资和过度融资 2019-05-12
  • 韩国再提4国联合申办世界杯 中国网友无视:我们自己来 2019-05-11
  • 中国人为什么一定要买房? 2019-05-11
  • 十九大精神进校园:风正扬帆当有为 勇做时代弄潮儿 2019-05-10
  • 粽叶飘香幸福邻里——廊坊市举办“我们的节日·端午”主题活动 2019-05-09
  • 太原设禁鸣路段 设备在测试中 2019-05-09
  • 拜耳医药保健有限公司获第十二届人民企业社会责任奖年度企业奖 2019-05-08
  • “港独”没出路!“梁天琦们”该醒醒了 2019-05-07
  • 陈卫平:中国文化内涵包含三方面 文化复兴表现在其中 2019-05-06
  • 人民日报客户端辟谣:“合成军装照”产品请放心使用 2019-05-05
  • 【十九大·理论新视野】为什么要“建设现代化经济体系”?   2019-05-04
  • 聚焦2017年乌鲁木齐市老城区改造提升工程 2019-05-04
  • 【专家谈】上合组织——构建区域命运共同体的有力实践者 2019-05-03
  • 【华商侃车NO.192】 亲!楼市火爆,别忘了买车位啊! 2019-05-03
    • / 14
    • 下载费用:30 金币  

    重庆时时彩走势图新浪: 一种基于P300脑电的虚拟驾驶系统控制方法.pdf

    关 键 词:
    一种 基于 P300 虚拟 驾驶 系统 控制 方法
      专利查询网所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
    摘要
    申请专利号:

    CN201610960996.X

    申请日:

    2016.10.28

    公开号:

    CN106569601A

    公开日:

    2017.04.19

    当前法律状态:

    实审

    有效性:

    审中

    法律详情: 实质审查的生效IPC(主分类):G06F 3/01申请日:20161028|||公开
    IPC分类号: G06F3/01; G06K9/00 主分类号: G06F3/01
    申请人: 华南理工大学
    发明人: 李远清; 潘鑫; 张智军
    地址: 510640 广东省广州市天河区五山路381号
    优先权:
    专利代理机构: 广州市华学知识产权代理有限公司 44245 代理人: 李斌
    PDF完整版下载: PDF下载
    法律状态
    申请(专利)号:

    CN201610960996.X

    授权公告号:

    |||

    法律状态公告日:

    2017.05.17|||2017.04.19

    法律状态类型:

    实质审查的生效|||公开

    摘要

    本发明公开了一种基于P300脑电的虚拟驾驶系统控制方法,步骤包括:S1、采集脑电信号数据,将采集的数据输送到计算机中;S2、对采集的数据进行预处理,接着提取特征;S3、对提取的特征进行贝叶斯线性判别分析的训练,将所得的贝叶斯模型保存;S4、使用贝叶斯模型在在线测试中进行自适应的脑电信号分类;S5、将分类所得字符指令用于控制城市中虚拟车辆的驾驶;S6、在驾驶过程中,人眼获取车辆的控制信息,包括位置信息、速度信息;通过大脑的判断来控制汽车,包括启动汽车、停止汽车和使汽车转向。本发明拥有较高的控制准确度,实现了无手动控制车辆驾驶,能够用于高度瘫痪病人的视觉训练,同时提供了一种有效的娱乐方式。

    权利要求书

    1.一种基于P300脑电的虚拟驾驶系统控制方法,其特征在于,包括以下步骤:
    S1、采集脑电信号数据,将采集的数据输送到计算机中;
    S2、对采集的数据进行预处理,接着提取特征向量;
    S3、对提取的特征向量进行贝叶斯线性判别分析的训练,将所得的贝叶斯模型进行保
    存;
    S4、使用自适应的贝叶斯线性判别分析算法对在线测试中进行自适应的脑电信号进行
    分类;
    S5、将分类所得字符指令用于控制城市中虚拟车辆的驾驶;
    S6、在驾驶过程中,人眼获取车辆的控制信息,包括位置信息、速度信息;然后通过大脑
    的判断来控制汽车,包括启动汽车、停止汽车和使汽车转向。
    2.如权利要求1所述的一种基于P300脑电的虚拟驾驶系统控制方法,其特征在于,所述
    步骤S1,采集脑电信号数据具体为:三维P300范式界面提供闪烁刺激,使用32通道脑电采集
    设备,以右耳为参考,采集脑电信号数据;将采集的数据以250Hz的采样率输送到计算机中。
    3.如权利要求1所述的一种基于P300脑电的虚拟驾驶系统控制方法,其特征在于,所述
    步骤S2中,预处理的方法为:首先采集的数据进行带通滤波,带通滤波范围为0.1-20Hz,然
    后将滤波后的数据进行1/6的下采样,并将除眼电通道FP1和FP2以外的30个通道的数据连
    接起来成为一个特征向量。
    4.如权利要求1所述的一种基于P300脑电的虚拟驾驶系统控制方法,其特征在于,所述
    步骤S3中,对提取的的特征向量使用贝叶斯判别分析算法进行模型训练,训练过程如下:
    S31、首先,训练集{x,t}是由EEG信号的所有通道共P个样本点组成的,其中x=(x1,...,
    xP),标签为t∈{-1,1},xi(1≤i≤p)表示一个采样样本在第i个采样点的幅值,w为本发明中
    需要在训练中获得的权值矩阵,在不考虑噪声的情况下:
    t=wTx=w0+w1x1+…+wPxP
    S32、在贝叶斯回归模型的框架下,假设t=wTx+nnoise,nnoise为高斯噪声,样本的标签满
    足以均值μ=wTx、方差为σ2=β-1的高斯分布,也即:

    式中,参数β是高斯分布的精度,且为方差的倒数;
    S33、假设P300信号的所有Trial都是独立同分布的,Q个独立试验样本的联合概率能够
    由每一个样本的条件概率来获得,那么令X={x1,x2,...,xQ}∈RP×Q,其中Q=N·M·K,这里K
    代表的是功能键的个数,而P=Cchannels·Ssamples,Cchannels代表的是电极帽的通道数,Ssamples
    代表的是样本的采样点数,那么其似然函数为:

    式中,t为由回归目标值组成的向量,X为由样本特征向量x组成的样本矩阵,Q为训练样
    本的数量;
    S34、为了利用贝叶斯框架,同时为了方便处理,引入w的先验分布的条件概率分布为:

    式中,α是高斯分布的精度,P为特征向量的维数,ε是一个极小的值,I是一个单位矩阵,
    维度为P,I′(α)为P+1矩阵,表示如下:

    S35、根据贝叶斯原理,w的后验分布为:
    <mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>|</mo> <mi>X</mi> <mo>,</mo> <mi>t</mi> <mo>,</mo> <mi>&alpha;</mi> <mo>,</mo> <mi>&beta;</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfrac> <mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>t</mi> <mo>|</mo> <mi>w</mi> <mo>,</mo> <mi>&beta;</mi> <mo>)</mo> </mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>&alpha;</mi> <mo>)</mo> </mrow> </mrow> <mrow> <mo>&Integral;</mo> <mi>p</mi> <mrow> <mo>(</mo> <mi>t</mi> <mo>|</mo> <mi>w</mi> <mo>,</mo> <mi>&beta;</mi> <mo>)</mo> </mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>,</mo> <mi>&alpha;</mi> <mo>)</mo> </mrow> <mi>d</mi> <mi>w</mi> </mrow> </mfrac> <mo>;</mo> </mrow>
    若简单使用D来替换训练集,似然函数可表示为:
    <mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>D</mi> <mo>|</mo> <mi>w</mi> <mo>,</mo> <mi>&beta;</mi> <mo>)</mo> </mrow> <mo>=</mo> <msup> <mrow> <mo>(</mo> <mfrac> <mi>&beta;</mi> <mrow> <mn>2</mn> <mi>&pi;</mi> </mrow> </mfrac> <mo>)</mo> </mrow> <mrow> <mi>Q</mi> <mo>/</mo> <mn>2</mn> </mrow> </msup> <mo>&CenterDot;</mo> <mi>exp</mi> <mrow> <mo>(</mo> <mo>-</mo> <mfrac> <mrow> <mi>&beta;</mi> <mo>|</mo> <mo>|</mo> <msup> <mi>X</mi> <mi>T</mi> </msup> <mi>w</mi> <mo>-</mo> <mi>t</mi> <mo>|</mo> <msup> <mo>|</mo> <mn>2</mn> </msup> </mrow> <mn>2</mn> </mfrac> <mo>)</mo> </mrow> <mo>;</mo> </mrow>
    使得w的后验分布方程表示为:
    <mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>|</mo> <mi>D</mi> <mo>,</mo> <mi>&alpha;</mi> <mo>,</mo> <mi>&beta;</mi> <mo>)</mo> </mrow> <mo>=</mo> <mfrac> <mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>D</mi> <mo>|</mo> <mi>w</mi> <mo>,</mo> <mi>&beta;</mi> <mo>)</mo> </mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>|</mo> <mi>&alpha;</mi> <mo>)</mo> </mrow> </mrow> <mrow> <mo>&Integral;</mo> <mi>p</mi> <mrow> <mo>(</mo> <mi>D</mi> <mo>|</mo> <mi>w</mi> <mo>,</mo> <mi>&beta;</mi> <mo>)</mo> </mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>|</mo> <mi>&alpha;</mi> <mo>)</mo> </mrow> <mi>d</mi> <mi>w</mi> </mrow> </mfrac> <mo>;</mo> </mrow>
    S36、由于似然函数与先验概率都是高斯分布,所以求出的后验概率也是高斯分布;通
    过最大化后验概率的方法可以求得对于给定训练集的最有可能的w值;w后验概率分布的均
    值m和方差C分别为:
    m=β(βXXT+I′(α))-1Xt,
    C=(βXXT+I′(α))-1,
    这里的α和β通过迭代来获得;
    S37、最后,我们输入一个样本预测回归标签的分布函数为:
    <mrow> <mi>p</mi> <mrow> <mo>(</mo> <mover> <mi>t</mi> <mo>^</mo> </mover> <mo>|</mo> <mi>&beta;</mi> <mo>,</mo> <mi>&alpha;</mi> <mo>,</mo> <mover> <mi>x</mi> <mo>^</mo> </mover> <mo>,</mo> <mi>D</mi> <mo>)</mo> </mrow> <mo>=</mo> <mo>&Integral;</mo> <mi>p</mi> <mrow> <mo>(</mo> <mover> <mi>t</mi> <mo>^</mo> </mover> <mo>|</mo> <mi>&beta;</mi> <mo>,</mo> <mover> <mi>x</mi> <mo>^</mo> </mover> <mo>,</mo> <mi>w</mi> <mo>)</mo> </mrow> <mi>p</mi> <mrow> <mo>(</mo> <mi>w</mi> <mo>|</mo> <mi>&beta;</mi> <mo>,</mo> <mi>&alpha;</mi> <mo>,</mo> <mi>D</mi> <mo>)</mo> </mrow> <mi>d</mi> <mi>w</mi> </mrow>
    该分布函数的均值和方差分别为:式中的μ为所求的标
    签回归值;
    S38、完成贝叶斯判别分析算法的模型训练后,得到一个贝叶斯模型,此模型记录了w的
    后验分布均值mT、方差C。
    5.如权利要求1所述的一种基于P300脑电的虚拟驾驶系统控制方法,其特征在于,所述
    步骤S4中,此模型记录了使用自适应贝叶斯判别分析算法来确定测试过程中脑电数据的字
    符归属。
    6.如权利要求1所述的一种基于P300脑电的虚拟驾驶系统控制方法,其特征在于,所述
    步骤S5中的字符指令包括:左转、启动、右转、伪键1、伪键2、伪键3、左转90度、停止以及右转
    90度,所述字符指令均在虚拟现实环境中完成对虚拟车辆的驾驶控制,同时被试者通过眼
    睛获取车辆的控制信息,然后通过指令的输出使车辆驾驶在正确的道路上。

    说明书

    一种基于P300脑电的虚拟驾驶系统控制方法

    技术领域

    本发明涉及脑机接口和虚拟现实技术领域,尤其涉及一种基于P300脑电的虚拟驾
    驶系统控制方法。

    背景技术

    在过去的十年里,虚拟现实技术被广泛应用于航空,军事,心理学,医学等领域。特
    别是在医学领域,虚拟现实使康复训练获得了较大进步。高度瘫痪病人能够通过虚拟现实
    系统获得运动康复和视觉康复训练,尽管在这些领域中获得了成功,但虚拟现实仍然是一
    个新颖的科技工具。一般来说,虚拟现实能够为系统的测试提供一个仿真平台,人们能够在
    虚拟现实环境中学习如何使用外部设备。

    传统的虚拟现实应用需要键盘、鼠标或者头盔等外部设备的输入,而高度瘫痪病
    人并不能利用这些外部设备,需要一个由脑信号直接控制的输入方式,本发明将提供一种
    基于P300脑电的虚拟驾驶控制技术。

    发明内容

    本发明要解决的技术问题在于,提供一种基于P300脑电的虚拟驾驶系统控制方
    法,能够使高度瘫痪病人不依赖固有的外部输入设备,在虚拟环境中练习使用外部设备的
    能力,且还能够给病人带来运动或者视觉的康复训练,同时能够作为一种娱乐方式,改善人
    的心情。

    为解决上述技术问题,本发明提供如下技术方案:一种基于P300脑电的虚拟驾驶
    系统控制方法,包括以下步骤:

    S1、采集脑电信号数据,将采集的数据输送到计算机中;

    S2、对采集的数据进行预处理,接着提取特征向量;

    S3、对提取的特征向量进行贝叶斯线性判别分析的训练,将所得的贝叶斯模型进
    行保存;

    S4、使用自适应的贝叶斯线性判别分析算法对在线测试中进行自适应的脑电信号
    进行分类;

    S5、将分类所得字符指令用于控制城市中虚拟车辆的驾驶;

    S6、在驾驶过程中,人眼获取车辆的控制信息,包括位置信息、速度信息;然后通过
    大脑的判断来控制汽车,包括启动汽车、停止汽车和使汽车转向。

    进一步地,所述步骤S1,采集脑电信号数据具体为:三维P300范式界面提供闪烁刺
    激,使用32通道脑电采集设备,以右耳为参考,采集脑电信号数据;将采集的数据以250Hz的
    采样率输送到计算机中。

    进一步地,所述步骤S2中,预处理的方法为:首先采集的数据进行带通滤波,带通
    滤波范围为0.1-20Hz,然后将滤波后的数据进行1/6的下采样,并将除眼电通道FP1和FP2以
    外的30个通道的数据连接起来成为一个特征向量。

    进一步地,所述步骤S3中,对提取的的特征向量使用贝叶斯判别分析算法进行模
    型训练,训练过程如下:

    S31、首先,训练集{x,t}是由EEG信号的所有通道共P个样本点组成的,其中x=
    (x1,...,xP),标签为t∈{-1,1},xi(1≤i≤p)表示一个采样样本在第i个采样点的幅值,w为
    本发明中需要在训练中获得的权值矩阵,在不考虑噪声的情况下:

    t=wTx=w0+w1x1+…+wPxP

    S32、在贝叶斯回归模型的框架下,假设t=wTx+nnoise,nnoise为高斯噪声,样本的标
    签满足以均值μ=wTx、方差为σ2=β-1的高斯分布,也即:


    式中,参数β是高斯分布的精度,且为方差的倒数;

    S33、假设P300信号的所有Trial都是独立同分布的,Q个独立试验样本的联合概率
    能够由每一个样本的条件概率来获得,那么令X={x1,x2,...,xQ}∈RP×Q,其中Q=N·M·K,
    这里K代表的是功能键的个数,而P=Cchannels·Ssamples,Cchannels代表的是电极帽的通道数,
    Ssamples代表的是样本的采样点数,那么其似然函数为:


    式中,t为由回归目标值组成的向量,X为由样本特征向量x组成的样本矩阵,Q为训
    练样本的数量;

    S34、为了利用贝叶斯框架,同时为了方便处理,引入w的先验分布的条件概率分布
    为:


    式中,α是高斯分布的精度,P为特征向量的维数,ε是一个极小的值,I是一个单位
    矩阵,维度为P,I′(α)为P+1矩阵,表示如下:


    S35、根据贝叶斯原理,w的后验分布为:


    若简单使用D来替换训练集,似然函数可表示为:


    使得w的后验分布方程表示为:


    S36、由于似然函数与先验概率都是高斯分布,所以求出的后验概率也是高斯分
    布;通过最大化后验概率的方法可以求得对于给定训练集的最有可能的w值;w后验概率分
    布的均值m和方差C分别为:

    m=β(βXXT+I′(α))-1Xt,

    C=(βXXT+I′(α))-1,

    这里的α和β通过迭代来获得;

    S37、最后,我们输入一个样本预测回归标签的分布函数为:


    该分布函数的均值和方差分别为:式中的μ为所求
    的标签回归值;

    S38、完成贝叶斯判别分析算法的模型训练后,得到一个贝叶斯模型,此模型记录
    了w的后验分布均值mT、方差C。

    进一步地,所述步骤S4中,此模型记录了使用自适应贝叶斯判别分析算法来确定
    测试过程中脑电数据的字符归属。

    进一步地,所述步骤S5中的字符指令包括:左转、启动、右转、伪键1、伪键2、伪键3、
    左转90度、停止以及右转90度;所述字符指令均在虚拟现实环境中完成对虚拟车辆的驾驶
    控制,同时被试者通过眼睛获取车辆的控制信息,然后通过指令的输出使车辆驾驶在正确
    的道路上。

    采用上述技术方案后,本发明至少具有如下有益效果:被试者能够通过本发明在
    不使用传统设备(如鼠标、键盘、头盔等)的情况下,仅仅使用脑电信号完成虚拟现实中车辆
    的驾驶;本发明不仅能够有益于脑部损伤患者的视觉训练,而且能够作为一种娱乐方式提
    供给患者。

    附图说明

    图1为本发明一种基于P300脑电的虚拟驾驶系统控制方法的流程图;

    图2为本发明一种基于P300脑电的虚拟驾驶系统控制方法的虚拟车辆驾驶环境
    图;

    图3为本发明一种基于P300脑电的虚拟驾驶系统控制方法的P300诱发过程时序
    图;

    图4为本发明一种基于P300脑电的虚拟驾驶系统控制方法的被试者训练数据离线
    分析图。

    具体实施方式

    需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相
    互结合,下面结合附图和具体实施例对本申请作进一步详细说明。

    图1为本发明的实现流程图,一种基于P300脑电的虚拟驾驶系统控制方法,包括以
    下步骤:

    S1、三维P300范式界面提供闪烁刺激,使用32通道脑电采集设备,以右耳为参考,
    采集脑电信号数据,将采集的数据以250Hz的采样率输送到计算机中;

    S2、对采集的数据进行预处理,预处理方式为:首先进行带通滤波,带通滤波范围
    为0.1-20Hz,然后将滤波后的数据进行1/6的下采样,并将除眼电通道FP1和FP2以外的30个
    通道的数据连接起来成为一个特征向量;接着提取特征;

    S3、对提取的特征进行贝叶斯线性判别分析的训练,将所得的贝叶斯模型保存;

    S4、使用贝叶斯模型在在线测试中进行脑电信号分类,使用的算法是自适应贝叶
    斯判别分析算法,将分类结果的对应字符指令进行输出、显示,字符指令包括:左转、启动、
    右转、伪键1、伪键2、伪键3、左转90度、停止以及右转90度;

    S5、将分类所得字符指令用于控制城市中虚拟车辆的驾驶;

    S6、在驾驶过程中,人眼获取车辆的控制信息,包括位置信息、速度信息;通过大脑
    的判断来控制汽车,包括启动汽车、停止汽车和使汽车转向。

    进一步地,当获取到脑电信号的特征向量后,需要进行模型训练,贝叶斯判别分析
    算法的模型训练过程如下:

    1.首先,训练集{x,t}是由EEG信号的所有通道共P个样本点组成的,其中x=
    (x1,...,xP),标签为t∈{-1,1},xi(1≤i≤p)表示一个采样样本在第i个采样点的幅值,w为
    本发明中需要在训练中获得的权值矩阵,在不考虑噪声的情况下:

    t=wTx=w0+w1x1+…+wPxP

    2.在贝叶斯回归模型的框架下,假设t=wTx+nnoise,样本的标签满足以均值μ=
    wTx、方差为σ2=β-1的高斯分布,也即:


    式中,参数β是高斯分布的精度,且为方差的倒数;

    3.假设P300信号的所有Trial都是独立同分布的,Q个独立试验样本的联合概率能
    够由每一个样本的条件概率来获得,那么令X={x1,x2,...,xQ}∈RP×Q,其中Q=N·M·K,这
    里K代表的是功能键的个数,而P=Cchannels·Ssamples,Cchannels代表的是电极帽的通道数,
    Ssamples代表的是样本的采样点数,那么其似然函数为:


    式中,t为由回归目标值组成的向量,X为由样本特征向量x组成的样本矩阵,Q为训
    练样本的数量;

    4.为了利用贝叶斯框架,同时为了方便处理,引入w的先验分布的条件概率分布
    为:


    式中,α是高斯分布的精度,P为特征向量的维数,ε是一个极小的值,I是一个单位
    矩阵,维度为P,I′(α)为P+1矩阵,表示如下:


    5.根据贝叶斯原理,w的后验分布为:


    若简单使用D来替换训练集,似然函数可表示为:


    使得w的后验分布方程表示为:


    6.由于似然函数与先验概率都是高斯分布,所以求出的后验概率也是高斯分布;
    通过最大化后验概率的方法可以求得对于给定训练集的最有可能的w值;w后验概率分布的
    均值m和方差C分别为:

    m=β(βXXT+I′(α))-1Xt,

    C=(βXXT+I′(α))-1。

    这里的α和β通过迭代来获得;

    7.最后,我们输入一个样本预测回归标签的分布函数为:


    该分布函数的均值和方差分别为:式中的μ为所求的
    标签回归值;

    8.完成贝叶斯判别分析算法的模型训练后,得到一个贝叶斯模型,此模型记录了w
    的后验分布均值mT、方差C。

    进一步地,所述步骤S4中,此模型记录了使用自适应贝叶斯判别分析算法来确定
    测试过程中脑电数据的字符归属。

    进一步地,所述步骤S5中,对特征进行分类,使用自适应的贝叶斯线性判别分析算
    法。

    进一步地,所述步骤S6中的字符指令包括:左转、启动、右转、伪键1、伪键2、伪键3、
    左转90度、停止以及右转90度。

    完成贝叶斯判别分析算法的模型训练后,使用自适应算法来确定测试过程中脑电
    数据的字符归属,将预处理过后的脑电EEG信号做处理,其方式如下:

    表1自适应算法处理过程



    表格中M=1代表第一个Round,Mmin和Mmax分别代表测试过程中最小和最大的重复
    次数,这里分别设置为3和8,θ0是一个由被试者训练状况所决定的阈值。

    阈值θ0的选择是对分类精度和信息传输率之间的一个平衡,分类精度能够在训练
    过程中获得,而信息传输率的获得如下:


    这里K是字符的数量,是系统的分类精度,代表的是系统每分钟做出的决策次
    数,信息传输率指的是系统单位时间内能够传输的比特数。

    一个合适的系统应该拥有较高的信息传输和分类准确率,为此我们需要在训练结
    果中呈现θ0与分类准确率,信息传输率之间的关系,在θ0在0-1之间变化时,找出分类准确第
    一次达到最大时θ0的取值,然后将其引入到在线测试自适应算法中。

    不同于普通的P300界面,三维P300界面在字符闪烁时不仅颜色上有所变化,而且
    在深度上也会有变化(深度就是指虚拟现实中字符块位置与观察者的视点位置),观察者观
    察到的字符状态变化较普通P300界面更为明显。

    人眼在虚拟现实中观察确定的路径,根据相应的路径完成所要完成的任务同时根
    据路况的不同凝视虚拟车辆中相应的字符实现车辆的启动、转向和停止等动作,同时当车
    辆遇到路口时会自动识别并且停下来,由驾驶者完成转向,再接着沿正确的方向行驶。

    本发明基于P300脑电的虚拟驾驶系统控制方法,拥有较高的控制准确度。实现了
    不用肢体参与控制虚拟车辆的目的,可以用于高度瘫痪病人的视觉训练,同时能够成为其
    有效的娱乐方式。

    图2为虚拟驾驶环境,图2(a)展示了被试者在做实验的场景,场景的屏幕中显示了
    本发明的三维虚拟驾驶界面,界面采用的是虚拟现实的主动式四缓冲模式,需要特定的四
    缓冲显卡、显示器和主动式3D立体眼镜支持,本发明采用的显卡是Nvidia Quadro K4200
    (4GB/Nvidia),3D VISION显示器和配套的Nvidia 3D VISION眼镜,虚拟现实开发平台基于
    开源的3D图形开发库OpenSceneGraph。

    图2(b)为虚拟车辆的外部环境。

    图2(c)为车辆驾驶室内的3D-P300字符界面,不同于普通的P300界面,3维P300界
    面在字符闪烁时不仅颜色上有所变化,而且在深度上也会有变化(深度就是指虚拟现实中
    字符块位置与观察者的视点位置),观察者观察到的字符状态变化较普通P300界面更为明
    显。本发明中使用了9个字符的P300界面,分别实现的功能有“左转15度”,“启动”,“右转15
    度”,“伪键1”,“伪键2”,“伪键3”,“左转90度”,“停止”,“右转90度”,分别对应的界面字符为
    “L”,“M”,“R”,“H1”,“H2”,“H3”,“L90”,“S”,“R90”。

    图2(d)为驾驶过程中的字符闪烁画面,在字符的闪动过程中不断输出字符,从而
    驱动车辆的行驶,同时当车辆遇到路口时会自动识别并且停下来,由驾驶者完成转向,再接
    着沿正确的方向行驶。

    图3为P300字符拼写过程的时序图。在这个视图中一个Trial代表需要输出一个字
    符,同时每两个Trial之间有一个小的间隔时间Break,一个Trial包含M个Round,每一个
    Round代表全部9个字符每个只闪烁一次,每一个Round的时间里包含9个Epoch,每个Epoch
    为600ms,每两个Epoch之间的间隔为100ms。

    图4为一名被试者训练离线分析后,得出的阈值θ0与分类精度和信息传输率的关
    系图。阈值的选取根据训练分类精度第一次达到最高值为准。

    一种基于脑电P300的虚拟驾驶系统控制方法步骤如下:

    首先由32导电极帽配合放大器将人眼看到字符闪烁时的脑电数据输入到计算机
    中,首先进行脑电数据的预处理,预处理方式为带通滤波,带通滤波范围为0.1-20Hz,然后
    将滤波后的数据进行1/6的下采样,并将除眼电通道FP1和FP2以外的30个通道的数据连接
    起来成为一个特征向量,由于我们在系统中设置了9个字符,在一轮闪烁后就会获得9个特
    征向量。

    在P300训练时,每个Trial开始前都会有一个字符提示,被试者需要在P300界面中
    找到这个字符,并一直凝视,直到10个Round完成,然后周而复始,最后完成训练过程,在训
    练过程中,M=10,进行了N个字符的训练,也即N个Trial,那么完成训练后就可以通过贝叶
    斯判别分析算法进行离线分析。离线分析的结果能够得出一个贝叶斯模型,这个贝叶斯模
    型里包含了由迭代优化得到的权重矩阵,也即为公式(9)所谈到均值m,也即是:

    m=β(βXXT+I′(α))-1Xt,

    然后使用m来计算训练过程数据的预测标签为:


    式中,代表训练样本。计算出θ0从0-1取不同值时,分类准确率,和信息传输率,信
    息传输率的表示如下:


    式中,K是字符的数量,是系统的分类精度,代表的是系统每分钟做出的决策
    次数,信息传输率指的是系统单位时间内能够传输的比特数。例如图4为实验中一位被试者
    的实验数据,按照θ0选取分类精度第一次达到最高值的原则,这位被试者的θ0=0.2,此时,
    其分类精度和信息传输率分别为:100%和66.92bits/min。

    其次,在线测试过程中,预处理和特征提取的方法与训练过程一致,然而,在测试
    中,每一个Trial输出一个命令字符用来控制车辆驾驶。这里的一个Trial包含M个Round,而
    这里的M值不同于训练部分,是自适应变化的,由训练数据的离线分析得出,同时M满足3≤M
    ≤8,M值的选取将会在自适应算法当中确定。根据每一个Trial的状态不同,每一个Trial的
    Round数也是不同的,也即是每一个Trial的时间是不同。对所有9个特征向量进行自适应线
    性判别分析,就可以得出相应的字符并输出。然后字符的输出作为虚拟现实指令的的输入,
    在虚

    拟现实中完成对虚拟车辆的控制。

    同时,在车辆的驾驶中,车辆会自动识别虚拟城市的转弯处,在转弯处会自动停
    止,当被试者通过P300脑电完成转向等控制后,再次按照被试者的输入,在虚拟现实中完成
    对虚拟车辆的控制。

    同时,在车辆的驾驶中,车辆会自动识别虚拟城市的转弯处,在转弯处会自动停
    止,当被试者通过P300脑电完成转向等控制后,再次按照被试者的意愿行进。同时,被试者
    通过眼睛判断车辆的位置、转向等信息,而后通过脑电改变车辆的驾驶状态。

    尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以
    理解的是,在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种等效的变
    化、修改、替换和变型,本发明的范围由所附权利要求及其等同范围限定。

    关于本文
    本文标题:一种基于P300脑电的虚拟驾驶系统控制方法.pdf
    链接地址://www.4mum.com.cn/p-6092659.html
    关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服 - 联系我们

    [email protected] 2017-2018 www.4mum.com.cn网站版权所有
    经营许可证编号:粤ICP备17046363号-1 
     


    收起
    展开
  • 四川郎酒股份有限公司获第十二届人民企业社会责任奖年度环保奖 2019-05-13
  • 银保监会新规剑指大企业多头融资和过度融资 2019-05-12
  • 韩国再提4国联合申办世界杯 中国网友无视:我们自己来 2019-05-11
  • 中国人为什么一定要买房? 2019-05-11
  • 十九大精神进校园:风正扬帆当有为 勇做时代弄潮儿 2019-05-10
  • 粽叶飘香幸福邻里——廊坊市举办“我们的节日·端午”主题活动 2019-05-09
  • 太原设禁鸣路段 设备在测试中 2019-05-09
  • 拜耳医药保健有限公司获第十二届人民企业社会责任奖年度企业奖 2019-05-08
  • “港独”没出路!“梁天琦们”该醒醒了 2019-05-07
  • 陈卫平:中国文化内涵包含三方面 文化复兴表现在其中 2019-05-06
  • 人民日报客户端辟谣:“合成军装照”产品请放心使用 2019-05-05
  • 【十九大·理论新视野】为什么要“建设现代化经济体系”?   2019-05-04
  • 聚焦2017年乌鲁木齐市老城区改造提升工程 2019-05-04
  • 【专家谈】上合组织——构建区域命运共同体的有力实践者 2019-05-03
  • 【华商侃车NO.192】 亲!楼市火爆,别忘了买车位啊! 2019-05-03
  • 棒球英文 双色球黑龙江36选7开奖结果查询 安徽十一选五号码遗漏 重庆时时彩开奖 917通比牛牛技巧 欢乐捕鱼人怎么赢话费 曾道人六合图库 乐视股票 江苏11选5下载 北京pk10赛车预测qq群 刮刮乐图片大全 全民麻将下载安装 彩票合买软件微信 平特一肖指的是什么 五年级的学生怎么赚钱 河北20选5走势图表幸运之门