“大数据”带来新(xīn)机遇 仪器仪表提供安全保障
时间:2020-08-27 11:09
一般而言,“大数据”指具有(yǒu)大容量、高速度、内容多(duō)样性和价值密度低等四个关键特性的数据和信息。仪器仪表是一类重要的“大数据”数据源,反映的是观察、记录、描述自然世界时所产生的大量数据,如科(kē)研数据、工程数据、多(duō)媒體(tǐ)数据等。相对互联网線(xiàn)上活动、社交网络、人口统计数据、金融交易行為(wèi)、電(diàn)子商(shāng)務(wù)、通信行為(wèi)明细等由人类社会行為(wèi)产生的数据来源,仪器仪表引起的“大数据”现象具有(yǒu)单个数据块大、数据总量巨大、形式上非结构化等特点。实现数据信息的获取、转换、存贮、处理(lǐ)和揭示物(wù)质运动是仪器仪表的基本任務(wù)。
為(wèi)此,在这里主要探讨两类问题:针对“大数据”引起的严峻挑战,研究仪器仪表技术的本身发展问题;抓住“大数据”带来的空前机遇,研究仪器仪表技术对“大数据”的支撑问题。
一、“大数据”现象下的仪器仪表可(kě)研究方向
1、仪器仪表中“大数据”的获取与传输问题
“大数据”的获取通常是高速率的,这对仪器仪表检测通道的D/A转换能(néng)力提出了很(hěn)高的要求,开发高采样率、高速率的数据采集装置成為(wèi)一个值得研究的方向。電(diàn)信号传输方面,SFP和QSFP接口技术正在普及,下一代25G接口技术也正在研发;光信号传输也非常值得研究。一个典型案例比如测绘地理(lǐ)信息,诸如海岛、山(shān)脉等地理(lǐ)图形,依靠传统测量手段来获取不具有(yǒu)可(kě)操作性,现在一般采用(yòng)机载激光雷达系统,这被看做测绘行业进入数字化测量时代的象征,由于飞机航速快、测绘面积大,带来的单位时间数据量巨大。机载激光雷达系统集成GPS、IMU、激光扫描、数码相机等多(duō)种光谱成像仪器,具有(yǒu)很(hěn)强的数字成像能(néng)力。“大数据”中测绘仪器仪表的测量技术更强调具有(yǒu)高频扫描、宽视角的能(néng)力。
2、仪器仪表中“大数据”的存储问题
長(cháng)久、可(kě)靠的保存“大数据”,并保证其在可(kě)用(yòng)性和可(kě)访问性以及在使用(yòng)“大数据”过程中,存储技术如何充分(fēn)利用(yòng)、发挥现有(yǒu)的网络技术、介质访问技术,从而及时高效地為(wèi)高层决策提供满足读写要求的数据访问。现有(yǒu)的仪表磁盘故障、阵列存储形式会带来数据管理(lǐ)、访问、可(kě)靠性的瓶颈。开发对象存储技术、具有(yǒu)冗余纠错副本功能(néng)储存技术,仪器仪表存储“大数据”的能(néng)力有(yǒu)待研究。传统的“磁盘文(wén)件系统”的储存结构不适应“大数据”,采用(yòng)“Flash云”的储存结构应用(yòng)于仪器仪表亟待研究。
3、仪器仪表中“大数据”的处理(lǐ)、利用(yòng)问题
不同的仪器仪表获得的“大数据”的格式结构不一致,比如有(yǒu)流量、压力、密度等物(wù)理(lǐ)量,也有(yǒu)文(wén)本、音频、视频等多(duō)媒體(tǐ)信息。仪器仪表中的“大数据”分(fēn)析处理(lǐ)利用(yòng)问题不局限于单个单元,而是由大量嵌入设备的传感器、控制器、执行器构成的整體(tǐ)系统完成。数据挖掘算法、机器學(xué)习算法、预测统计等人工智能(néng)方法越来越被广泛应用(yòng)到智能(néng)设备中,从而完成对“大数据”的分(fēn)析处理(lǐ)利用(yòng)。一个实例是智能(néng)電(diàn)表,当用(yòng)户安装有(yǒu)太阳能(néng)等新(xīn)能(néng)源时,用(yòng)户自产的太阳能(néng)转化電(diàn)能(néng)与企业供应的電(diàn)能(néng)之间可(kě)以存在一个平衡关系,智能(néng)電(diàn)表终端通过長(cháng)时间的监测单位时间采用(yòng)的用(yòng)户用(yòng)電(diàn)习惯等“大数据”,可(kě)以智能(néng)预测未来一段时间内用(yòng)户用(yòng)電(diàn)需求,再通过電(diàn)量交易平衡電(diàn)网压力和削减用(yòng)電(diàn)成本。
现在一种观点认為(wèi),仪器仪表的“大数据”行為(wèi)强烈依赖IT设备,建立数据采集仪器到IT设备之间紧密联系的端到端解决方案具有(yǒu)较大挑战性。
4、仪器仪表中“大数据”的安全问题
如何保证自身以及用(yòng)户数据的安全隐私,已经成了“大数据”发展的首要议题。仪器仪表安装位置广泛,有(yǒu)的暴露自然环境之中,也有(yǒu)通过软环境受到数据入侵造成的数据毁灭,仪器仪表技术的“大数据”安全问题值得研究。需要建立自上而下的仪器主动安全防护體(tǐ)系,对“大数据”的入侵、毁灭具有(yǒu)可(kě)抗性、恢复性。
总的来说,“大数据”下的仪器仪表研究开发已逐渐突破传统范畴,正在向云计算、云存储、互联网技术等融合发展。工程师们需要开发拥有(yǒu)更高带宽和吞吐量的最先进的高速串行数据总線(xiàn)技术,同时对不断更新(xīn)和复杂化的行业规范和标准提供简单省时又(yòu)精确的测量方法;解决各种瞬态信号在时间相关的多(duō)个互联域中的联合监测和分(fēn)析;在能(néng)源技术方面做到更高效、节能(néng)、稳定。
二、仪器仪表技术的发展对“大数据”的支撑
1、多(duō)物(wù)理(lǐ)量检测技术、RFID技术和模块化数据采集系统等為(wèi)“大数据”的获取提供前提与支撑。
多(duō)种物(wù)理(lǐ)量检测获取到不同种类的数据,即為(wèi)非结构化数据,现代仪表检测的灵敏度、精度、测量范围、检测对象都有(yǒu)了很(hěn)大的提升,现代仪器仪表对物(wù)理(lǐ)世界的认知交互应用(yòng)越来越广泛。先进的传感检测仪表是信息世界与物(wù)理(lǐ)世界互动的前提,也是造成海量数据的原因。如美國(guó)國(guó)家仪器公司(NI公司)开发的产品NICompactDAQ、CompactRIO、PXI硬件,以及诸如NILabVIEW系统设计软件和DIAdem之类的工具為(wèi)“大数据”实时的在采集数据的源头处理(lǐ)数据。
2、互联网技术、总線(xiàn)技术、分(fēn)布式仪表技术為(wèi)“大数据”的信息融合提供多(duō)样性保障。
随着现代工业的飞速发展和生产装置规模的不断扩大,生产过程日趋复杂,对企业生产自动化仪表和各种信息的集成设备信息综合要求越来越高。据估计,到2020年,全球将有(yǒu)约300亿的仪器设备通过无線(xiàn)方式发生互联,无線(xiàn)传感网、物(wù)联网技术在智能(néng)電(diàn)网、智能(néng)交通等中得到了越来越多(duō)的应用(yòng)。一个大的复杂系统亟需综合各种数据信息,不同设备检测获取的数据的结构是不同的;通过网络,中间点智能(néng)变送器发挥的作用(yòng)更加重要,它将為(wèi)上层设备的“大数据”分(fēn)析提供可(kě)访问性、可(kě)用(yòng)性。总的来说,网络技术、总線(xiàn)技术、分(fēn)布式测量技术為(wèi)仪器仪表产生的“大数据”信息的时空融合提供渠道,以保证数据多(duō)样性。
3、低功耗、高处理(lǐ)能(néng)力的集成電(diàn)路与存储技术為(wèi)“大数据”的运算处理(lǐ)速度和海量存储提供可(kě)能(néng)。
低功耗、高频率的微型芯片、大规模集成電(diàn)路、超大容量存储技术的迅猛发展直接促进了海量数据的有(yǒu)效处理(lǐ)与存储。近年出现的云储存技术有(yǒu)效突破本地单一传感器数据存储的局限。1965年,GordonMoore提出著名的摩尔定律,即集成電(diàn)路中晶體(tǐ)管数量大约每两年就会翻一番。近50年过去,摩尔定律依然影响着電(diàn)子行业,摩尔定律的效应令技术的价格变得可(kě)以让人承受,并且新(xīn)的发明帮助工程师和科(kē)學(xué)家以先进的電(diàn)子仪器仪表采集、分(fēn)析和储存数据,正是这些变化引起了“大数据”这一奇观现象。
4、嵌入“智慧”的仪器仪表為(wèi)“大数据”的低密度价值信息的分(fēn)析、综合、提取、决策提供支持。
从“大数据”中汲取价值的过程是一个从原始数据获取到有(yǒu)价值信息提炼的阶段过程。统计分(fēn)析、数据挖掘、机器學(xué)习等智能(néng)算法越来越被嵌入到智能(néng)仪器仪表中,使得对“大数据”的价值利用(yòng)更為(wèi)充分(fēn),借助现代化微型智能(néng)处理(lǐ)器、执行单元仪表等,可(kě)以建立有(yǒu)效的“大数据”分(fēn)析模型,并在大量数据集合上执行多(duō)种模式的智能(néng)交互。