机器学习和深度学习的特征提取

特征提取是指在保留原始数据集信息的同时,将原始数据转化为可以处理的数字特征的过程。它的效果比直接对原始数据进行机器学习要好

特征提取可手动或自动完成:

  • 手动特征提取需要识别和描述与给定问题相关的特征,并实现提取这些特征的方法。在许多情况下,对背景或领域有良好的理解有助于做出明智的决定,确定哪些特性是有用的。经过几十年的研究,工程师和科学家已经开发出图像、信号和文本的特征提取方法。一个简单特征的例子是信号中一个窗口的平均值。
  • 自动特征提取使用专门的算法或深度网络从信号或图像中自动提取特征,而不需要人工干预。当您想快速从原始数据转向开发机器学习算法时,这种技术非常有用。小波散射是自动特征提取的一个例子。

随着深度学习的发展,特征提取在很大程度上已经被深度网络的第一层所取代——但主要用于图像数据。对于信号和时间序列应用,特征提取仍然是第一个挑战,需要大量的专业知识才能建立有效的预测模型。

信号和时间序列数据的特征提取

特征提取可以识别信号中最具辨识性的特征,而机器学习或深度学习算法更容易利用这些特征。直接使用原始信号进行训练的机器学习或深度学习,由于数据速率高和信息冗余,往往会产生较差的结果。

用于机器学习分类器的信号和时间序列数据特征提取的原理图过程。

信号特征和时频变换

在分析信号和传感器数据时,信号处理工具箱™小波工具箱™提供函数,使您可以在时间、频率和时频域测量信号的共同特征。您可以应用脉冲和过渡度量,测量信噪比(SNR),估计谱熵和峰度,并计算功率谱。

时频变换,如短时傅里叶变换(STFT),可以作为机器学习和深度学习模型中训练数据的信号表示。例如,卷积神经网络(convolutional neural networks, CNNs)常用在图像数据上,它可以成功地从时频变换返回的二维信号表示中学习。

使用短时傅里叶变换的信号谱图。频谱图显示频率含量随时间的变化。

根据具体应用程序或特性,还可以使用其他时频转换。例如,常数q变换(CQT)提供对数间隔的频率分布;连续小波变换(CWT)通常是一种有效的识别非平稳信号短时瞬变的方法。

音频应用程序和预测性维护功能

音频工具箱™提供了一组时频转换,包括Mel谱图、倍频和伽玛通滤波器组以及离散余弦变换(DCT),这些通常用于音频、语音和声学。对于这些类型的信号,其他流行的特征提取方法包括梅尔频率倒谱系数(MFCC)、伽玛通倒谱系数(GTCC)、音高、调和度和不同类型的音频频谱描述符。的音频特征提取器工具可以帮助从同一源信号中选择和提取不同的音频特征,同时重用任何中间计算以提高效率。

对于开发状态监测和预测性维护应用程序的工程师来说,the诊断功能设计器应用预见性维护工具箱™让您提取、可视化和排序功能,以设计用于监视机器运行状况的条件指示器。

诊断功能设计器应用程序可以让你设计和比较功能,以区别标称和故障系统。

自动特征提取方法

新的高级方法已经出现,可以自动从信号中提取特征。自编码器、小波散射和深度神经网络常用来提取特征和降维数据。

小波散射网络自动从实值时间序列和图像数据中提取低方差特征。这种方法产生的数据表示使类内的差异最小化,同时保持类间的可辨别性。小波散射在没有大量数据的情况下工作得很好。

图像数据的特征提取

图像数据的特征提取将图像有趣的部分表示为一个紧凑的特征向量。在过去,这是通过专门的特征检测、特征提取和特征匹配算法来完成的。今天,深度学习在图像和视频分析中非常流行,它可以将原始图像数据作为输入,跳过特征提取步骤。不管哪种方法,计算机视觉应用,如图像配准、目标检测和分类,和基于内容的图像检索,都需要有效的图像特征表示,隐式的第一层深度网络,或者显式地应用一些长期存在的图像特征提取技术。

使用特征检测、特征提取和匹配相结合的方法在混乱的场景中检测一个物体(左)(右)。详细信息请参见示例。

特征提取技术提供计算机视觉工具箱™图像处理工具箱™包括:

  • 梯度方向直方图
  • 加速鲁棒特征(SURF)
  • 局部二进制模式(LBP)特征

图像梯度直方图(HOG)特征提取(top)。通过不同的单元格大小来创建不同大小的特征向量来表示图像(底部)。详细信息请参见示例。

参见:特征匹配,对象检测,图像稳定,图像处理和计算机视觉,图像识别,对象检测,对象识别,数字图像处理,光流,RANSAC,模式识别,点云,深度学习,特征选择

机器学习培训课程

在本课程中,您将决定如何使用非监督学习技术来发现大数据集的特征,以及监督学习技术来构建预测模型。