智能制造导论-p298.pdf - 第194页
4.3.1 工业大数据 3 ） 大数据存储技术 面对如此巨大的数据量，能否建立相应的数据库并随时管理和调用其中数 据，成为大数据存储技术的关键。这需要开发新型数据库技术，如键值数 据库、列存数据库、图存数据库以及文档数据库等类型，以解决海量图文 数据的存储及应用问题。 4 ） 大数据分析 大数据分析是指对规模巨大的数据进行分析。其中包括： 可视化分析。不管对于数据分析专家还是普通用户，数据可视化都是数据 分析工具最基本的功能。 数据挖掘…
4.3.1 工业大数据
3.大数据处理关键技术
为了获取大数据中的有价值信息，必须选择一种有效的方式来处理它。大
数据技术一般包括数据采集、数据预处理、数据存储和数据分析四个部分。
1） 大数据采集技术
数据可以是从传感器、网络社交、论坛等渠道获得的信息，数据类型包括
结构化、半结构化以及非结构化数据。大数据采集即是通过传感体系、网
络通信体系、智能识别体系及软硬件资源接入系统，实现对结构化、半结
构化、非结构化的海量数据的智能化识别、跟踪、接入、传输、信号转换、
监控、初步处理和管理等。
2） 大数据预处理技术
大量数据接收完毕后，需要对多种结构的数据进行分类，将一些复杂的数
据转化为单一的数据类型，并过滤掉错误及无用的信息。这种在主要的处
理以前对数据进行的一些处理叫做大数据预处理。大数据预处理有多种方
法：数据清理，数据集成，数据变换和数据归约。这些大数据处理技术在
数据挖掘之前使用，可以提高数据挖掘模式的质量，降低实际挖掘所需要
的时间。
4.3.1 工业大数据
3） 大数据存储技术
面对如此巨大的数据量，能否建立相应的数据库并随时管理和调用其中数
据，成为大数据存储技术的关键。这需要开发新型数据库技术，如键值数
据库、列存数据库、图存数据库以及文档数据库等类型，以解决海量图文
数据的存储及应用问题。
4） 大数据分析
大数据分析是指对规模巨大的数据进行分析。其中包括：
可视化分析。不管对于数据分析专家还是普通用户，数据可视化都是数据
分析工具最基本的功能。
数据挖掘。从大量的、不完全的、有噪声的、模糊的、随机的实际应用数
据中，提取隐含在其中的、人们事先不知道的、但又是潜在有用的信息和
知识的过程。
预测性分析。根据可视化分析和数据挖掘的结果做出一些预测性判断。
语义引擎。分析语义中隐含的消息，并主动地提取信息。
4.3.1 工业大数据
4.大数据与新一代智能工厂
消费需求的个性化，要求传统制造业突破现有的生产方式与制造模式，处
理和挖掘消费需求所产生的海量数据与信息。同时，非标准化产品的生产
过程中也会产生大量的生产信息与数据，需要及时收集、处理和分析，用
来指导生产。这两方面的大数据信息流最终会通过互联网在智能设备之间
传递，由智能设备来分析、判断、决策、调整、控制并继续开展智能生产，
生产出高品质的个性化产品。可以说，大数据是构成新一代智能工厂的重
要技术支撑。
智能工厂中的大数据，是“信息”与“物理”世界彼此交互与融合的产物。
大数据应用将带来制造业企业创新和变革的新时代，在传统的制造业生产
管理信息数据的基础上，结合物联网等感知的物理数据，形成智能制造时
代的生产数据私有云，创新制造业企业的研发、生产、运营、营销和管理
方式，带给企业更快的速度、更高的效率和更敏锐的洞察力。