1.为什么要把降维作为一个单独的预处理步骤？复杂度依赖于输入的维度d和数据样本的规模N，为了减少存储量和计算时间。较简单的模型在小数据集上更为鲁棒，较简单的模型具有较小的方差。当数据能够用较少特征解释时，就能够更好地理解解释数据的过程，使得能够提取知识。当数据能够用少数维表示而不丢失信息时，我们可以对数据绘图，并且可视化地分析它的结构和离群点。降维的主要方法有两个：特征选择和特征提取。特征选择是从
转载
2023-12-15 17:35:58
70阅读
机器学习算法的空间、时间复杂度依赖于输入数据的规模，维度规约(Dimensionality reduction)则是一种被用于降低输入数据维数的方法。维度规约可以分为两类： 特征选择(feature selection)，从原始的d维空间中，选择为我们提供信息最多的k个维(这k个维属于原始空间的子集)特征提取(feature extraction)，将原始的d维空间映射到k维空间中(新的k维空
转载
2023-11-24 15:28:28
119阅读
Python 的 re 模块（Regular Expression 正则表达式）提供各种正则表达式的匹配操作。在文本解析、复杂字符串分析和信息提取时是一个非常有用的工具，下面总结了 re 模块的常用方法。一. 预定义字符\d 匹配所有的十进制数字 0-9
\D 匹配所有的非数字，包含下划线
\s 匹配所有空白字符（空格、TAB等）
\S 匹配所有非空白字符，包含下划线
\w 匹
转载
2023-07-29 18:35:14
151阅读
目录一、为什么要用 Numpy 库1. 低效的Python for循环2. Numpy为什么如此高效3. 什么时候用Numpy二、Numpy 数组的创建1. 从列表开始创建2. 从头创建数组三、Numpy 数组的性质1. 数组的属性2. 数组索引3. 数组的切片4. 数组的变形5 数组的拼接6. 数组的分裂四、Numpy 四大运算1. 向量化运算2. 矩阵运算3. 广播运算4. 比较运算和掩码5
转载
2024-05-09 13:55:11
40阅读
背景： 1、自动化测试过程中需要用python连接数据库对界面上计算出来的数据进行校验 2、平时查询数据库用的PLSQL,公司用的orcal数据库 3、cmd打开命令提示符，输入python，提示版本位3.9，64位，plsql新建sql window查询，输入select * from v$version,看到plsql是64位的4、写在前面：安装的python、instantclient位数需
转载
2024-01-10 12:32:13
90阅读
原文链接：http://tecdat.cn/?p=5354维度的诅咒是一种现象，即数据集维度的增加导致产生该数据集的代表性样本所需的指数级更多的数据。 为了对抗维度的诅咒，已经开发了许多线性和非线性降维技术。这些技术旨在通过特征选择或特征提取来减少数据集中维度（变量）的数量， 而不会显着丢失信息。特征提取是将原始数据集转换为维数较少的数据集的过程。两个众所周知的，密切相关的特征提取技术是...
原创
2021-05-12 23:54:25
802阅读
原文链接：http://tecdat.cn/?p=5354维度的诅咒是一种现象，即数据集维度的增加导致产生该数据集的代表性样本所需的指数级更多的数据。 为了对抗维度的诅咒，已经开发了许多线性和非线性降维技术。这些技术旨在通过特征选择或特征提取来减少数据集中维度（变量）的数量， 而不会显着丢失信息。特征提取是将原始数据集转换为维数较少的数据集的过程。两个众所周知的，密切相关的特征提取技术是...
原创
2021-05-20 22:04:21
427阅读
一、IEC主要规约概论IEC规约适用范围通讯方式IEC101厂站与调度主站间通讯串行IEC102电量主站与站内抄表终端通讯 IEC103与站内继电保护设备间通讯串行IEC104厂站与调度主站间通讯以太网 101月104比较：相同点：①适用范围：厂站与主站之间②规约结构：应用层定义相同不同点：①通讯方式：10
转载
2024-07-22 22:13:35
656阅读
# 深入理解Python 103规约
Python是一种非常受欢迎的编程语言，因其简洁的语法和强大的功能而广泛应用。在Python编程实践中，有一些约定和规约可以帮助程序员写出高效、可读和易维护的代码，其中“Python 103规约”提供了一些关键指导。本文将对这些规约进行详细探讨，并通过代码示例阐释其重要性。
## 1. Python命名约定
在Python中，命名约定主要包括变量名、函数
1.数据规约的意义： 对海量的而数据进行分析和挖掘，需要大量的时间，使得这种分析可能不现实或不可行。数据规约对数据集的规约表示进行分析，这样需要分析的数据少得多，但并不影响数据挖掘的效果。2.数据规约的策略 a.数据立方体聚集：类似于前面的数据聚集，对数据立方体进行上卷和下钻，在不同抽象层次进行分析（例：年，季度，月）。 定义;基本方体：最低抽象层次；顶
Python正式实习的第二天学习内容较多，故发多篇Blog进行记录。 和大多数高级程序语言一样，Python也鼓励程序员使用模块化开发，即对于函数的使用。一、内建函数 Python也内建了许多函数可供调用，例如求绝对值函数与强制数据类型转换函数abs(-5)
str(100二、定义函数的规则 与C++不同，在Python中自定义一个函数有以下规则。 1、定义函数前无需声明返回值，而是统一使用def
# 数值规约Python实现
## 引言
数值规约是数据预处理的重要一步，它用于缩小数据范围或者将数据转换为可接受的格式。在Python中，我们可以使用一些库和函数来实现数值规约。本文将介绍数值规约的流程，并提供详细的代码示例和注释。
## 数值规约的流程
下面是数值规约的一般流程：
| 步骤 | 描述 |
| ---- | ---- |
| 1 | 导入所需的库 |
| 2 | 加载数据
原创
2024-02-02 09:19:38
56阅读
五、数据规约数据归约（Data Reduction）用于在尽可能保持数据完整性的基础上得到数据的归约表示。也就是说，在归约后的数据集上挖掘将更有效，而且仍会产生相同或相似的分析结果。数据归约包括维归约、数量归约和数据压缩。（一）维归约维归约的思路是减少所考虑的随机变量或属性的个数，使用的方法有属性子集选择、小波变换和主成分分析。属性子集选择是一种维归约方法，其中不相关、弱相关或冗余的属性或维被检测
转载
2023-11-22 19:06:28
21阅读
现代科技时代产生和收集的数据越来越多。然而在机器学习中，太多的数据可不是件好事。某种意义上来说，特征或维度越多，越会降低模型的准确性，因为需要对更多的数据进行泛化——这就是所谓的“维度灾难”。降维是一种降低模型复杂性和避免过度拟合的方法。特征选择和特征抽取是两种主要的降维方式。特征选择是从原有特征集中选出一部分子集，而特征抽取是从原有特征集收集一部分信息来构建新的特征子空间。本文将会
python中数组切片[:,i] [i:j:k] [:-i] [i,j,:k]# 逗号“,”分隔各个维度，“:”表示各个维度内的切片，只有:表示取这个维度的全部值，举例说明如下
1.二维数组
X[:,0]取所有行的第0个数据,第二维下标位0的所有数据，第0列（从0开始）
X[:,1] 取所有行的第1个数据
X[:,1:]第一维全部取，即所有行，列上从第一列开始取，不要第0列
X[1,:]
转载
2023-08-07 21:14:49
178阅读
算法(algorithm)本质上是一连串的计算。同一个问题可以使用不同算法解决，但计算过程中消耗的时间和资源可能千差万别。那如何比较不同算法之间的优劣呢？目前分析算法主要从时间和空间两个维度进行。时间维度就是算法需要消耗的时间，时间复杂度(time complexity)是常用分析单位。空间维度就是算法需要占用的内存空间，空间复杂度(space complexity)是常用分析单位。因此，分析算法
转载
2023-09-17 12:31:48
70阅读
现在网上有很多类似的文章、其实这一篇也借鉴了很多其他博主的文章。写这篇文章的重点是在于解析功能和报文、对MMS这个协议并不会做很多介绍。好了，我们开始吧。MMS协议的协议规范取决于IEC61850规范从报文来看mms协议共有tpkt cotp mms 下图为mms协议整体报文结构之前的tpkt 和 cotp这一块的就不展开进行介绍了，可以自行去了解一下（我们主要是讲MMS这一层）Ini
转载
2023-12-29 23:12:53
905阅读
python002 Python3 基础语法编码默认情况下，Python 3 源码文件以 UTF-8 编码，所有字符串都是 unicode 字符串。 当然你也可以为源码文件指定不同的编码：# -*- coding: cp-1252 -*-标识符 第一个字符必须是字母表中字母或下划线'_'。 标识符的其他的部分有字母、数字和下划线组成。 标识符对大小写敏感。在Python 3中，非-ASCII
# 实现104规约的Python示例
104规约是一种网络协议，广泛应用于智能出货机和自动贩卖机等设备中。以下步骤将指导你如何实现104规约的基本功能，同时为你提供相应的 Python 代码示例。
## 实现步骤
我们可以将实现过程分为以下几个步骤：
| 步骤 | 说明 |
|------|--------------------------
原创
2024-09-04 05:20:18
71阅读
# Python子函数规约
在Python中，函数是一种非常重要的概念。它是一段可重复使用的代码，用于执行特定的任务。在编写大型程序时，函数能够帮助我们将代码分解成小块，使得程序结构更加清晰，易于维护和扩展。
在函数的定义中，有一个重要的概念叫做子函数。子函数指的是在函数内部定义的函数，它们被称为嵌套函数或内部函数。子函数只能在父函数内部被调用，外部无法直接访问到它们。通过使用子函数，我们可以
原创
2023-12-21 05:44:37
51阅读
