中山大学周建华&清华大学任天令:机器学习辅助软体电子用于健康监测

由于能够反映人体的健康状况,长时间实时的生理信号监测被广泛地应用于疾病的诊断与预防。然而,受硬质基底、非应变、低生物相容性等限制,传统的刚性传感器并不适用于大应变、粗糙表面的场景。其刚性形态不仅极大地影响佩戴体验,而且无法与皮肤紧密贴合,导致实际测量的信号引入不少伪影、噪音甚至淹没原始生理信号。而软体电子的出现能够解决这一问题,基于与皮肤相近的杨氏模量以及超薄可拉伸等特性,其与皮肤之间可以形成良好的界面,从而获得高质量生理信号。同时,高的人体相容性使得信号监测过程不会影响人们的日常生活,从而提高佩戴舒适度与用户体验,进而拓展了信号数据库的规模。大规模高质量的数据库对于提高机器学习算法的表现至关重要。另一方面,机器学习算法也能够赋予软体电子器件“思考”的能力,使之不仅可以监测信号,而且可以诊断信号。因此软体电子与机器学习是相辅相成的关系。

Soft electronics for health monitoring assisted by machine learningYancong Qiao*, Jinan Luo, Tianrui Cui, Haidong Liu, Hao Tang, Yingfen Zeng, Chang Liu, Yuanfang Li, Jinming Jian, Jingzhi Wu, He Tian, Yi Yang, Tian-Ling Ren*, and Jianhua Zhou*

Nano-Micro Letters (2023)15: 66

https://doi.org/10.1007/s40820-023-01029-1

本文亮点

1. 介绍了机器学习辅助下用于健康监测的软体电子,并依次讨论了软体电子材料、生理信号、机器学习算法以及它们之间的关系。

2. 通过列举在软体电子应用中的代表性例子,阐释并总结了经典机器学习算法和神经网络算法的原理。

3. 概述了机器学习辅助软体电子在健康监测领域的潜在挑战,展望了未来研究方向。

内容简介

过去二十年间,各种新型材料的发现与应用为软体电子提供了高速发展的基础。软体电子的发展为各种数据集的建立、扩展、完善提供可靠的来源。同时,由于机器学习算法以及GPU硬件的快速发展,使机器学习在计算机视觉以及自然语言处理等领域爆发式增长。因此软体电子与机器学习的结合也就顺理成章,近几年来,科研工作者已经在这个交叉学科领域进行了广泛的研究。中山大学周建华乔彦聪课题组&清华大学任天令课题组在本文中详细介绍了各种新型软体电子材料,随后回顾了基于这些软体电子器件检测的生理信号,并重点回顾了机器学习的各种算法在软体电子中的应用。最后讨论了机器学习辅助的软体电子系统研究的展望、挑战和总结。

图文导读

I 软体纳米材料

软体电子材料经常在弯曲和伸展环境下工作,所以需要经受大应变而不损坏,也要与人体形成良好的界面。在此要求下,需要通过设计材料结构、厚度、形貌、生物兼容性等多个参数,保证其在各种可能出现的环境下能够正常工作。本文首先介绍了应用于软体电子领域的各种纳米材料,包括碳纳米管、石墨烯、MXene、银纳米线、水凝胶、纳米织物以及液态金属。其中,石墨烯是软体电子材料领域的代表性材料。图1(a)-(d)是石墨烯的常用制备工艺,即化学气相沉积法和激光直写法。图1(e)(f)分别为激光诱导石墨烯(LIG)的扫描电镜图(SEM)。图1(g)-(k)是石墨烯的不同结构图,表明其可以制备成多种不同形状。图1(l)(m)展现了石墨烯具有的超高表面积,因而可以用作化学传感器。

2.png

图1. 石墨烯基软体电子的微结构和制备过程。(a)-(c)化学气相沉积法制备石墨烯;(d)激光直写法制备石墨烯;(e) LIG表面和(f)横截面SEM;(g)纸基还原氧化石墨烯;(h)织物状石墨烯;(i)随机分布的自旋粒微结构石墨烯;(j)堆叠结构石墨烯薄片;(k)多孔石墨烯网络;(l) PBS中的氧化石墨烯示意图;(m)还原氧化石墨烯/AuNPs复合材料SEM。

II 用于不同生理信号检测的可穿戴器件

人体在日常生活中会产生多种生理信号,文中详细介绍了软体电子用于监测脉搏、呼吸、人体运动、眼内压、发声、触觉、心音、脑电、心电、肌电、眼电等各种生理信号。针对以上信号的不同特点以及微弱、易受干扰、伪影及噪音多等通性,需要设计不同性能要求的软体电子器件。以呼吸和脉搏信号的检测为例,图2(a)(b)分别展示了用于脉搏波检测的压阻式传感器和压容式传感器,为了将微弱脉搏波信号放大,可以使用压力偏置的方法。图2(c)(f)分别基于湿度和温度实现呼吸信号检测。图2(d)-(f)所示,通过呼吸传感器,可以检测出各种呼吸模式比如快速、正常、深呼吸以及口鼻呼吸,也可以检测呼吸时撅嘴和抿嘴等嘴唇动作。

3.png

图2. 用于脉搏和呼吸的软体传感器。(a)在不同动脉处收集的血压波形;(b)无线传输的双层线圈和环绕动脉的袖型脉搏波传感器;(c)放置在医疗呼吸口罩内的湿度传感器;(d)和(e)不同呼吸模式下的电阻响应;(f)放置在上唇的呼吸传感器。

III 机器学习辅助软体电子

软体电子发展大大提高了生理信号数据库的数据量和质量,从而进一步优化了机器学习算法的表现。其中,经典算法以及神经网络算法都在其中扮演了重要角色。结合软体电子实例,本文首先讨论了降维算法包括主成分分析(PCA)、线性判别分析(LCA)、傅里叶变换和小波变换。如图3(a),经过PCA,可以找到一组来自原始空间的正交坐标轴。图3(b)-(d)展示了一种使用PCA进行手势分类的可穿戴表面肌生物传感系统,监测肌肉活动以反映手势。对由五个特征向量组成的分类窗口以及从单自由度手势试验中投影的时空超向量进行PCA。图3(c)上面两个主成分显示了不同手势的一般聚类。

经典的机器学习分类算法包括高斯朴素贝叶斯(GNB)、支持向量机(SWM)、动态时间校正(DTW)、kNN、K-Means和决策树等。如图4(a),GNB假设每个参数满足高斯分布,对输出变量具有独立的预测能力。计算因变量划分到每一组的概率,将所有参数组合后划分为概率较高的类别。图4(b)展示了一个由多个有机磁场效应晶体管(OFETs)组成的软体电子鼻传感器阵列。图4(c)(d)所示的是在“原生软体处理引擎”(NFPE)中实现的“单变量贝叶斯特征投票分类器”(UB-FVC),用于汗味分类。

5.png

图4. 软体系统检测并用高斯朴素贝叶斯处理信号。(a) GNB示意图;(b)一个单个OFET传感器和一个包含8个OFET传感器的电子鼻传感器阵列的示意图;(c) UB-FVC推理阶段的微架构;(d)实现UB-FVC微架构的NFPE显微图。

由于易于构建和功能强大的特点,神经网络算法也迅速得到了广泛的研究。文中详细回顾了全连接神经网络(FNN)、卷积神经网络(CNN)、循环神经网络(RNN)和脉冲神经网络(SNN)在软体系统中的应用,它们的示意图见图5。

6.png

图5. 常用的神经网络示意图。(a)全连接神经网络;(b)卷积神经网络;(c)循环神经网络。

最后,文章列举了目前软体电子与机器学习领域仍待克服的挑战。在材料方面,包括提升传感材料的重复性和良品率、软体材料的生物相容性、封装材料的透气性、透水性,以及为了实现软体系统,电路和其他部分也有待发展为软体形态。对于软体电子与算法结合,作者在软硬件方面都提出了进一步优化的方案。在软件方面,建立更多标准的软体电子器件采集的信号数据库,实现生理信号测试方法的标准化,探究更符合软体电子器件的算法,使物理信号和化学信号相结合,充分发挥Yolo、Faster R-CNN、Transformer等新型神经网络的强大功能;在硬件方面,实现软体集成电路,增加软体系统中计算单元密度,实现大规模算法的原位运行,研究先进的软体材料与制备工艺。

作者简介

7.png乔彦聪
本文第一作者、通讯作者
中山大学 助理教授
主要研究领域
(1)柔性生理信号传感器;(2)柔性MEMS工艺;(3)柔性电子皮肤器件和系统;(4)仿神经器件和智能生理信号分析。
主要研究成果
中山大学生物医学工程学院助理教授,博士毕业于清华大学集成电路学院,在学期间四次获得国家奖学金、此外还获得蒋南翔奖学金(清华大学研究生特等奖学金入围奖)、北京市优秀毕业生、清华大学优秀博士生毕业论文、清华大学优秀研究生共产党员等荣誉。截至目前,以第一作者身份与通讯作者在《Nano-Micro Letter》、《ACS Nano》、《Chemical Engineering Journal》、《Small》、《Journal of Materials Chemistry A》等期刊发表论文19篇,Google Scholar引用1300余次,h因子19。
Email:qiaoyc3@mail.sysu.edu.cn
8.png周建华
本文通讯作者
中山大学 教授
主要研究领域
(1)体外诊断(IVD)快速检测,(2)微流控技术,(3)生物/化学传感检测,(4)先进微纳材料加工技术,(5)可穿戴生化传感及人-机接口,(6)高通量技术、人工智能辅助影像介导药物诊疗,(7)人工器官及再生医学。
主要研究成果
中山大学生物医学工程学院教授,博士生导师,生物医学传感检测及微流控技术团队负责人,哈佛大学访问学者,教育部重大人才工程入选者。长期从事微纳制造、生物医学微纳检测与传感、微流控技术、快速检测技术、高通量检测和筛选平台、微纳诊疗技术和人工组织器官的研究。近五年主持包括国家重点研发计划、国家自然科学基金面上项目和青年项目、广东省自然科学基金等十余项国家、省市科研项目。目前已发表SCI论文100余篇,其中包括本领域主流期刊Nat. Commun. (2篇), Adv. Mater., Proc. Nati. Acad. Sci., Angew Chem., Nano Letter., Small, Lab Chip, Adv. Funct. Mater., Biosens. Bioelectron., Anal. Chem.等;担任60余种国内外期刊的审稿人和仲裁审稿人。申请50余项国家发明专利(PCT 2项)。获2017年广东省科学技术二等奖(4/9)。
Email:zhoujh33@mail.sysu.edu.cn
9.jpg任天
本文通讯作者
清华大学 教授
主要研究领域
新型智能微纳电子器件、芯片与系统,包括新型二维智能电子器件、芯片与集成系统:(1)基于石墨烯的智能柔性声学系统;(2)基于新型二维材料的类神经芯片;(3)二维电子器件的片上集成关键技术;(4)智能光电与射线探测器件与芯片系统;先进信息器件与芯片技术:(1)新型不挥发存储芯片,存算融合及非冯架构芯片技术;(2)基于磁阻效应或自旋调控的新型器件、芯片技术;(3)芯片能量控制、芯片信息安全关键新技术;(4)面向先进通信技术的射频滤波器、微天线、微电感等;智能感知芯片与智能微系统:(1)柔性、可穿戴智能器件芯片,以及面向元宇宙、医疗健康的新型感知技术;(2)面向智慧环境、智能汽车、智慧农业等应用的新型传感、探测芯片及系统技术。(3)微纳声学器件芯片与系统(语音交互、超声影像等);(4)集成微传感器芯片(压力、温度、加速度、红外传感器等)。
主要研究成果
清华大学信息科学技术学院副院长,教育部长江学者特聘教授,国家杰出青年基金获得者,清华大学环境与健康传感技术研究中心副主任。近年来,承担国家自然科学重点基金、国家重大科技专项、国家公益性行业科研专项、国家重大仪器专项、国家863计划、国家973计划等多项国家重要科技项目,做出一系列具有重要国际影响的创新学术成果。近期代表性创新成果包括:世界上栅极物理尺寸最小的晶体管、智能人工喉、智能人工耳膜、新型三维人机交互器件芯片、新型不挥发存储芯片、光谱可调的发光器件、智能仿生突触芯片等。在国内外重要学术期刊和会议发表论文700余篇,包括Nature、Nature Electronics、Nature Machine Intelligence、Nature Communications、Energy & Environmental Science、Advanced Materials、ACS Nano、Nano Letters、IEEE Electron Device Letters、IEEE Journal of Solid-State Circuits、Biosensors & Bioelectronics、Nanoscale、Carbon、IEEE Transactions on Electron Devices、IEEE Transactions on Microwave Theory and Techniques、IEEE Sensors Journal等重要SCI期刊论文,以及国际微电子领域顶级学术会议IEDM论文(15篇)。荣获Elsevier评选的“中国大陆高被引学者”(2018、2019、2021年)。获得国内外发明专利70余项。
Email:rentl@tsinghua.edu.cn
撰稿:原文作者
编辑:《纳微快报(英文)》编辑部

关于我们

10.jpg

Nano-Micro Letters《纳微快报(英文)》是上海交通大学主办、在Springer Nature开放获取(open-access)出版的学术期刊,主要报道纳米/微米尺度相关的高水平文章(research article, review, communication, perspective, highlight, etc),包括微纳米材料与结构的合成表征与性能及其在能源、催化、环境、传感、电磁波吸收与屏蔽、生物医学等领域的应用研究。已被SCI、EI、PubMed、SCOPUS等数据库收录,2021JCR影响因子为 23.655,学科排名Q1区前5%,中科院期刊分区1区TOP期刊。多次荣获“中国最具国际影响力学术期刊”、“中国高校杰出科技期刊”、“上海市精品科技期刊”等荣誉,2021年荣获“中国出版政府奖期刊奖提名奖”。欢迎关注和投稿。

Web: https://springer.com/40820

E-mail: editor@nmlett.org

Tel: 021-34207624

如果文章对您有帮助,可以与别人分享!:Nano-Micro Letters » 中山大学周建华&清华大学任天令:机器学习辅助软体电子用于健康监测

赞 (0)