特征选择(亦即降维)是数据预处理中非常重要的一个步骤。对于分类来说，特征选择可以从众多的特征中选择对分类最重要的那些特征，去除原数据中的噪音。主成分分析(PCA)与线性判别式分析(LDA)是两种最常用的特征选择算法。关于PCA的介绍，可以见我的另一篇博文。这里主要介绍线性判别式分析(LDA)，主要基于Fisher Discriminant Analysis with Kernals[
转载
2024-01-13 22:43:19
363阅读
线性判别式分析（LDA）线性判别式分析(Linear Discriminant Analysis, LDA) 是一种有效的特征抽取方法。使用这种方法能够使投影后模式样本的类间散布矩阵最大，并且同时类内散布矩阵最小。即模式在该空间中有最佳的可分离性。1.原理将带上标签的数据（点），通过投影的方法，投影到维度更低的空间中，使得投影后的点，会形成按类别区分，一簇一簇的情况，相同类别的点，将会在投影后的空
转载
2024-05-08 21:08:58
86阅读
Scikit-Learn是基于python的机器学习模块，基于BSD开源许可证。这个项目最早由DavidCournapeau 在2007年发起的，目前也是由社区自愿者进行维护。它的主要特点有操作简单、高效的数据挖掘和数据分析、无访问限制、在任何情况下可重新使用、建立在NumPy、SciPy和matplotlib基础上、使用商业开源协议--BSD许可证等。scikit-learn的基本功能主要被分为
转载
2024-06-06 21:43:12
93阅读
本篇blog是利用Python进行文章特征提取的续篇，主要介绍构建带TF-IDF权重的文章特征向量。
In [1]:
# 带TF-IDF权重的扩展词库
# 在第一篇文档里 主要是利用词库模型简单判断单词是否在文档中出现。然而与单词的顺序、频率无关。然后词的频率对文档更有意义。因此本文将词频加入特征向量
In [2]:
转载
2023-11-23 22:51:20
216阅读
文章目录4.4 特征工程-特征提取学习目标1 特征提取1.1 定义1.2 特征提取API2 字典特征提取2.1 应用2.2 流程分析2.3 总结3 文本特征提取3.1 应用3.2 流程分析3.3 jieba分词处理3.4 案例分析3.5 Tf-idf文本特征提取3.5.1 公式3.5.2 案例3.6 Tf-idf的重要性4 小结 4.4 特征工程-特征提取学习目标了解什么是特征提取知道字典特征提
转载
2024-07-31 18:15:01
44阅读
目录前言一、本文采用的数据库二、数据读取部分1.训练部分 2.预测部分3.训练部分数据读取三、hog特征提取部分1.训练部分的hog特征提取2.预测部分单张图像的hog特征提取四、各类算法（SVM,KNN,随机森林等）1.训练部分（训练集和测试集的划分）2.各类算法：（1）SVM支持向量机(2) KNN（3）随机森林（4）朴素贝叶斯
转载
2023-12-12 23:00:27
73阅读
本文介绍图像处理中特征提取的常用算子 - LBP（Local Binary Pattern）算法。
LBP，全称Local Binary Pattern，局部二值模式，是一种能够描述图像纹理的算法，并且具有旋转不变性和灰度不变性等优点。本文会介绍最基本的LBP算法和其扩展。
本文介绍图像处理中特征提取的常用算子 - LBP 算法。LBP，全称Local Bi
转载
2023-08-01 21:18:06
198阅读
图像特征按性质分有颜色，纹理，形状，空间关系，边缘，角点，区域，脊等。通常人的视觉是先从形状，区域和颜色纹理边缘特征快速判断目标，然后再从脊，角点细节上分析判断目标，如果还分析不出，就会动用大脑从空间关系特征进行综合分析。如果关注某个目标，则会以背景，颜色，纹理，形状，区域等特征过滤环境中的干扰目标区域，直接提取相关目标进行特征分析。从形状，区域，颜色，边缘等外部特征快速识别目标，一般采用提取图像
转载
2024-01-05 14:49:46
0阅读
另外加了些自己的理解一、原理：Sift算法的优点是特征稳定，对旋转、尺度变换、亮度保持不变性，对视角变换、噪声也有一定程度的稳定性；缺点是实时性不高，并且对于边缘光滑目标的特征点提取能力较弱。 Surf（Speeded Up Robust Features）改进了特征的提取和描述方式，用一种更为高效的方式完成特征的提取和描述。二、Surf实现流程如下：1. 构建Hessian（黑塞矩阵
转载
2023-12-06 18:56:08
227阅读
介绍FPN是一种利用常规CNN模型来高效提取图片中各维度特征的方法。在计算机视觉学科中，多维度的目标检测一直以来都是通过将缩小或扩大后的不同维度图片作为输入来生成出反映不同维度信息的特征组合。这种办法确实也能有效地表达出图片之上的各种维度特征，但却对硬件计算能力及内存大小有较高要求，因此只能在有限的领域内部使用。FPN通过利用常规CNN模型内部从底至上各个层对同一scale图片不同维度的特征表达
转载
2023-11-24 22:31:12
339阅读
HOGHOG 特征, histogram of oriented gradient, 梯度方向直方图特征, 作为提取基于梯度的特征, HOG 采用了统计的方式(直方图)进行提取. 其基本思路是将图像局部的梯度统计特征拼接起来作为总特征. 局部特征在这里指的是将图像划分为多个Block, 每个Block内的特征进行联合以形成最终的特征.1.将图像分块: 以Block 为单位, 每个Block以一定的
转载
2023-10-16 18:29:00
227阅读
titching模块中对特征提取的封装解析（以ORB特性为例）
OpenCV中Stitching模块（图像拼接模块）的拼接过程可以用PipeLine来进行描述，是一个比较复杂的过程。在这个过程中，特征提取是重要的一个部分。由于OpenCV发展到了3.X以后，Stitching模块的相关函数进行了重新封装，所以对于学习研究造成了一定困难。这里通过解析代
转载
2024-06-07 09:12:27
143阅读
4.1 Feature Extractorclass radiomics.featureextractor.RadiomicsFeaturesExtractor(*args, **kwargs)特征抽取器是一个封装的类，用于计算影像组学特征。大量设置可用于个性化特征抽取，包括：需要抽取的特征类别及其对应特征；需要使用的图像类别（原始图像/或衍生图像）；需要进行什么样的预处理
转载
2023-10-11 10:03:00
882阅读
什么是特征提取呢？ 1.1 定义将任意数据（如文本或图像）转换为可用于机器学习的数字特征注：特征值化是为了计算机更好的去理解数据特征提取分类:
字典特征提取(特征离散化)文本特征提取图像特征提取（深度学习将介绍）1.2 特征提取APIsklearn.feature_extraction1.1 定义将任意数据（如文本或图像）转换为
转载
2024-01-05 16:10:58
280阅读
（1）词袋（Bag of Words）表征 文本分析是机器学习算法的主要应用领域。但是，文本分析的原始数据无法直接丢给算法，这些原始数据是一组符号，因为大多数算法期望的输入是固定长度的数值特征向量而不是不同长度的文本文件。为了解决这个问题，scikit-learn提供了一些实用工具可以用最常见的方式从文本内容中抽取数值特征，比如说：标记（tokenizing）文本以及为每一个可能的标记（toke
转载
2024-01-15 02:07:13
75阅读
经验模态分解（Empirical Mode Decomposition, EMD） 优点：能够对非线性、非平稳过程的数据进行线性化和平稳化处理，且经分解后的函数彼此正交，理论上互不相关，从而尽可能多的保留原始数据基本特征。计算步骤：通过计算原序列 Y(t) 的上下包络线的“瞬时平衡位置”，提取内在模函数（IMF）。原序列减去该内在模函数后得到的序列作为新的原序列重复计算，如此依次提取出N
转载
2023-10-05 21:29:01
52阅读
特征提取，简单来说是把一系列数据中转换为可用于机器学习的数字特征。sklearn.feature_extraction是scikit-learn特征提取的模块本文分别总结以下内容：Onehot编码DictVectorizer使用CountVectorizer使用TfidfVectorizer使用HashingVectorizer使用1.Onehot编码上面说过特征转化为机器学习的数字特征，其实就是
转载
2024-05-31 10:20:41
128阅读
2.2 特征工程介绍2.2.1 为什么需要特征工程（Feature Engineering）2.2.2 什么是特征工程特征工程是使用专业背景知识和技巧处理数据，使得特征能在机器学习算法上发挥更好的作用的过程。 意义：会直接影响机器学习的效果。sklearn ：特征工程 pandas：数据清洗、数据处理特征工程包含的内容：特征抽取/提取、特征预处理、特征降维2.3.1 特征抽取/提取：机器学习算法
转载
2023-11-18 22:14:32
138阅读
记忆力不好，做个随笔，怕以后忘记。
网上很多关于MFCC提取的文章，但本文纯粹我自己手码，本来不想写的，但这东西忘记的快，所以记录我自己看一个python demo并且自己本地debug的过程，在此把这个demo的步骤记下来，所以文章主要倾向说怎么做，而不是道理论述。由于python的matplotlib.pyplot库没有下载成功不会画图，文中大部分图片是我网上找的。必备基础知知识: 1. 对
转载
2024-02-28 12:29:35
64阅读
文本提取及文本向量化词频和所谓的Tf-idf是传统自然语言处理中常用的两个文本特征。以词频特征和Tf-idf特征为基础，可以将一段文本表示成一个向量。将多个文本向量化后，然后就可以运用向量距离计算方法来比较它们的相似性、用聚类算法来分析它们的自然分组。如果文本有标签，比如新闻类、军事类、财经类等等，那么还可以用它们来训练一个分类模型，用于对未知文本进行标签预测。词频将文本中每个词出现的次数按一定的
转载
2023-08-30 22:27:39
10阅读
