脑机音乐接口,高效检测用户的情绪状态

目录

本分享为脑机学习者Rose整理发表于公众号:脑机接口社区(微信号:Brain_Computer).QQ交流群:903290195

英国雷丁大学和普利茅斯大学的研究团队开发和评估了一个情感脑-机音乐接口(aBCMI),用来调节用户的情感状态。构造一个aBCMI来检测用户的当前情感状态并尝试调制它为了实现特定的目标(例如,用户平静或快乐)通过播放音乐根据一个特定的情感目标生成算法作曲系统和基于案例的推理系统。

脑机音乐接口(BCMI)是一种特定类型的BCI,其目的是让用户与音乐进行交互或控制音乐的某些属性(Miranda2006)。例如,将BCMI用于主动控制娱乐系统,并为残疾人士提供创造性的渠道,让他们能够主动控制音乐(Miranda等,2011)。

音乐是调节情绪的一种强有力的方法,可以使听者感受到从欢乐到忧郁的多种情绪(Juslin和Sloboda 2001)。音乐疗法能开发音乐匹配或影响听众情绪的能力。音乐疗法是一种心理治疗技术,旨在通过音乐与治疗师的互动,促进沟通并改善患者的情绪状态。例如,患者可以与治疗师在乐器上进行独奏或二重奏。音乐也可以用来帮助个人调节或学习更有益地调节他们的情绪(Bhattacharya和Lee 2012, McDermott et al 2013)。

类似于脑机音乐接口(aBCMI)这样的系统可通过促进对音乐缺乏信心或能力不足以从事传统音乐创作活动(作为治疗过程一部分)的患者的治疗有用,使他们能够在治疗过程中从事传统的音乐创作活动(如演奏或即兴创作新音乐)。此外,通过产生与患者的情绪状态相匹配的音乐,aBCMI可能用作患者向治疗师表达情绪状态的表达工具。

英国雷丁大学和普利茅斯大学的科研人员试图探索是否可以构建能够检测和调节用户当前情感状态的aBCMI系统。想要实现这个系统,则会遇到如下潜在的问题:
(1)我们可以在在线aBCMI使用过程中检测到个人当前的情感状态吗?
(2)我们能否确定一种基于案例的推理方法,以用于确定调节个人情感状态的方法?
(3)由aBCMI系统调制的合成音乐能否动态地影响aBCMI用户的情感状态,以实现一组目标(例如使用户更快乐)?

研究人员在论文中首先描述了提出的系统。然后继续描述用于评估其调节用户情感状态的功效的实验。之后,提出结果以证明系统的性能并讨论其影响和意义。科研人员调查提出的aBCMI系统设计是否能够调节用户的情感状态。

研究人员设计的aBCMI系统主要包括如下5个部分:

(1) 用户模块;

(2) 用户生理信号采集模块(包括脑电图(EEG),心电图(ECG)以及呼吸频率等);

(3) 情感状态检测系统,识别用户当前的情感状态;

(4) 基于案例的推理系统,以确定如何将用户从他们当前的情感状态转移到新的目标情感状态;

(5) 音乐生成器,用于向用户播放音乐,以便通过基于案例的推理系统识别出的最合适的情感轨迹,将用户移至目标情感状态。

论文中根据检测方法成功对所报告的情感状态轨迹的影响,来测量情感状态检测对aBCMI系统总体性能的影响。情感状态检测方法正确的试验中,在“平静”目标期间报告的平均情感状态轨迹的示例。

对于相同的“平静”目标,这些可能与情感状态检测不正确的试验的平均情感状态轨迹相比较,如下图所示。

研究人员在论文中写道,当情感状态检测正确时,唤醒的轨迹呈现出更陡峭的梯度变化。具体而言,当aBCMI能够正确检测用户的初始情感状态时,它可以更成功地减少用户的唤醒。

在该项研究中,研究人员开发和测试的aBCMI系统能够调节个人的情感状态。 通过使用生理测量,可以客观地估计一个人的情感状态。 这与基于案例的推理系统相结合,以识别和利用最佳方法来调节情感状态。最后,使用情感驱动的算法作曲系统,使aBCMI产生理论上无限数量的情感唤起音乐。

作者在论文中写道,完整的aBCMI系统为监视和调节用户的情绪提供了独特的工具。 未来的工作将寻求探索将aBCMI系统用于患有情绪问题的患者以及其他患者的可能性,也有人建议其他患者例如脑损伤患者也有可能从中受益(Bradt等,2010) 。

参考文献
Alpaydin E 2004 Introduction to MachineLearning (Cambridge, MA: MIT Press)
Atkinson J and Campos D 2016 ImprovingBCI-based emotion recognition by combining EEG feature selection and kernel classifiersExpert Syst. Appl. 47 35–41
Bajaj V and Pachori R 2014 Detection ofhuman emotions using features based on the mulitwavelet transform of EEGsignals Brain–Computer Interfaces: Current Trends and Application vol 1(Berlin: Springer) ch 8, p 416
Bhattacharya J and Lee E-J 2012 Modulationof EEG theta band signal complexity by music therapy Int. J. Bifurcation Chaos 269
Bradt J, Magee W L, Dileo C, Wheeler B Land McGilloway E 2010 Music therapy for acquired brain injury The Cochrane Databaseof Systematic Reviews] (7) CD006787 http://www.ncbi.nlm.nih.gov/pubmed/20614449
Brodersen K H, Ong C S, Stephan K E andBuhmann J M 2010 The balanced accuracy and its posterior distribution 2010 20thInt. Conf. on Pattern Recognition (Piscataway, NJ: IEEE) pp 3121–4
Chella F, Pizzella V, Zappasodi F andMarzetti L 2016 Impact of the reference choice on scalp EEG connectivityestimation J. Neural Eng. 13 1–21
Cowie R, Douglas-Cowie E, Savvidou S,McMahon E, Sawey M and Schr?der M 2000 ‘FEELTRACE’: an instrument for recordingperceived emotion in real time Proc. ISCA Workshop on Speech and Emotion pp19–24
DalyI, Billinger M, Laparra-Hernández J, Aloise F, García M L, Faller J, Scherer Rand Müller-Putz G 2013a On the control of brain–computer interfaces by userswith cerebral palsy Clin. Neurophys.

参考
脑机音乐接口,高效检测用户的情绪状态

本文章由脑机学习者Rose笔记分享,QQ交流群:903290195
更多分享,请关注公众号

原文地址:https://www.cnblogs.com/RoseVorchid/p/12239852.html

时间: 2024-08-28 15:19:27

脑机音乐接口,高效检测用户的情绪状态的相关文章

脑机接口-BCI

---编译硅谷live 脑机接口(英语:brain-computer interface,简称BCI:有时也称作direct neural interface或者brain-machine interface),是在人或动物脑(或者脑细胞的培养物)与外部设备间创建的直接连接通路.在单向脑机接口的情况下,计算机或者接受脑传来的命令,或者发送信号到脑(例如视频重建),但不能同时发送和接收信号.而双向脑机接口允许脑和外部设备间的双向信息交换. 在该定义中,"脑"一词意指有机生命形式的脑或神经

人类永生、意念打字、脑控万物,还有多少未来在被脑机接口创造!

想不想将意识上传,实现永生? 现在,已经有一家公司在尝试了!南加州初创公司Kernel目前实现了将部分的意识上传到芯片,当然,是在老鼠身上. 这个实验是这样的: 他们将大脑内植入芯片的老鼠A放在一个环境中,在某片区域给它奖励.喂食,而在另一片区域给它惩罚.电击.芯片将这些信息记录之后,他们又把这个芯片植入另一只老鼠B,再把老鼠B放到之前的环境中观察. 他们发现,老鼠B会躲避老鼠A受过惩罚的区域,也会主动去老鼠A受奖励的区域,从而证明这个意识是可以被移植的. 去年8月,Kernel团队获得在线支付

深度学习与脑机接口_1(基于卷积神经网络的P300信号检测)

参考论文<Convolutional Neutral Networks for P300 Detection with Application to Brain-Computer Interfaces> Hubert Cecotti and Axel Gra¨ser ?1.所研究问题:检测单次刺激P300信号的有无(即不经过叠加平均) 以下四个图全部都包含P300波形: 我们只能从图1和4中观察出P300波形,图2和图3很难确定的说P300波形存在与否(然而实际上是有的) 提出问题:如何在叠加

什么!脑机接口可让中风患者快速,准确的打字?

---编译硅谷live 由斯坦福大学调查员领导的临床研究论文证明,脑机对接可以使人们以最高的速度和准确度水平通过直接的脑部控制进行麻痹. 该报告涉及三名严重肢体无力的研究参与者,其中两名是患有萎缩性侧索硬化症,也被成为"Lou Gehrig氏病",另外一位患有脊髓损伤.他们每人都有一个或两个小片阿司匹林大小的电极阵列防止在他们的大脑中记录来自运动皮质.控制肌肉运动区域的信号.这些信号通过电缆传输到计算机,并通过算法转换成将光标引导到屏幕键盘上的字符的点击命令. 每个参与者在经过最少的培

脑机接口入门概览

脑机接口(Brain Machine Interface)就是研究如何用神经信号与外部机械直接交互的技术 分类:植入式和非植入式.植入式的更精确,植入式电极相比于头皮贴片而言精确度高的多 植入式:MEA-EcoiG .nanowireFETs.人造神经细胞释放神经递质.neural Dust 非植入式:EEG.MEG.FMRI.FNIRS.PET EEG:Electroencephalography,即脑电图.通过脑电图描记仪,将人体脑部微弱生物电于头皮处收集,并放大记录而得到曲线图. MEA:

MVC 检测用户是否已经登录

     当我们访问某个网站的时候需要检测用户是否已经登录(通过Session是否为null),我们知道在WebForm中可以定义一个BasePage类让他继承System.Web.UI.Page,重写它的OnInit()方法,在OnInit()中判断Session中是否有用户登录的信息 ///<summary> /// 公共基类里面干一些公共的事情 ///</summary> public class BasePage : System.Web.UI.Page { //页面生命周

微信服务开发——读取百度音乐接口返回音乐

最近用了很多网上的坑爹接口,都泪奔了,不说了,都是泪啊~ 前两天做了个微信返回音乐的接口,先来看下效果: 出来之后在手机微信里面就可以实现音乐播放了. 技术很简单,首先访问百度音乐接口,传入音乐名称和歌手名称,然后百度会返回一个XML格式给你,里面包括音乐的链接地址等信息.但是比较坑爹的是,这里的链接地址是写在两个node里面的,我要先从一个encode里面拿到前半段,然后再从deconde里面拿到后半段,然后拼起来,拿到URL之后,就要把这个信息放到返回给用户的音乐信息里面. 先来看下微信里面

[转]MVC 检测用户是否已经登录

本文转自:http://blog.csdn.net/jayzai/article/details/41252137 当我们访问某个网站的时候需要检测用户是否已经登录(通过Session是否为null),我们知道在WebForm中可以定义一个BasePage类让他继承System.Web.UI.Page,重写它的OnInit()方法,在OnInit()中判断Session中是否有用户登录的信息 [csharp] view plaincopyprint? ///<summary> /// 公共基类

如何搭建一个更高效的用户反馈机制?

如果标题吸引你点击进来,说明你的 App 已经积累了一定数量的用户了.想知道你的用户如何评价你的 App?想了解他们的需求?往下瞧↓↓ 近两年,越来越多的 App 开发者开始重视用户反馈,但每天面对大量繁冗.无序的用户反馈,运营人员处理起来很费力,甚至出现很多“没人理”的情况.如何搭建一个更高效的用户反馈机制? 友盟用户反馈就致力于提供这样的服务,让 App 开发者和用户之间的交流更加简单和实时,沟通“零距离”.近日,友盟用户反馈发布他们的最新版本(Android 5.1 /iOS 2.1),除