1.数据规约的意义： 对海量的而数据进行分析和挖掘，需要大量的时间，使得这种分析可能不现实或不可行。数据规约对数据集的规约表示进行分析，这样需要分析的数据少得多，但并不影响数据挖掘的效果。2.数据规约的策略 a.数据立方体聚集：类似于前面的数据聚集，对数据立方体进行上卷和下钻，在不同抽象层次进行分析（例：年，季度，月）。 定义;基本方体：最低抽象层次；顶
业务代码最多的就是搞清楚业务关系，增删改查，实现业务功能，但是数据结构和算法却能提升性能，一个功能请求一次需要运行2^n还是n^2的时间，最终反映到用户响应时间差别是很大的，甚至有时候不优化性能可能就会卡死。 八大算法：记代码是没用的，关键要记住思想1.插入排序将一个数插入到一个有序列表中，从第一个位置开始，调整顺序，直到有序def insert_sort(lists):
cou
转载
2023-06-21 16:38:01
65阅读
Python 的 re 模块（Regular Expression 正则表达式）提供各种正则表达式的匹配操作。在文本解析、复杂字符串分析和信息提取时是一个非常有用的工具，下面总结了 re 模块的常用方法。一. 预定义字符\d 匹配所有的十进制数字 0-9
\D 匹配所有的非数字，包含下划线
\s 匹配所有空白字符（空格、TAB等）
\S 匹配所有非空白字符，包含下划线
\w 匹
转载
2023-07-29 18:35:14
151阅读
目录一、为什么要用 Numpy 库1. 低效的Python for循环2. Numpy为什么如此高效3. 什么时候用Numpy二、Numpy 数组的创建1. 从列表开始创建2. 从头创建数组三、Numpy 数组的性质1. 数组的属性2. 数组索引3. 数组的切片4. 数组的变形5 数组的拼接6. 数组的分裂四、Numpy 四大运算1. 向量化运算2. 矩阵运算3. 广播运算4. 比较运算和掩码5
转载
2024-05-09 13:55:11
40阅读
背景： 1、自动化测试过程中需要用python连接数据库对界面上计算出来的数据进行校验 2、平时查询数据库用的PLSQL,公司用的orcal数据库 3、cmd打开命令提示符，输入python，提示版本位3.9，64位，plsql新建sql window查询，输入select * from v$version,看到plsql是64位的4、写在前面：安装的python、instantclient位数需
转载
2024-01-10 12:32:13
90阅读
一、IEC主要规约概论IEC规约适用范围通讯方式IEC101厂站与调度主站间通讯串行IEC102电量主站与站内抄表终端通讯 IEC103与站内继电保护设备间通讯串行IEC104厂站与调度主站间通讯以太网 101月104比较：相同点：①适用范围：厂站与主站之间②规约结构：应用层定义相同不同点：①通讯方式：10
转载
2024-07-22 22:13:35
658阅读
# 深入理解Python 103规约
Python是一种非常受欢迎的编程语言，因其简洁的语法和强大的功能而广泛应用。在Python编程实践中，有一些约定和规约可以帮助程序员写出高效、可读和易维护的代码，其中“Python 103规约”提供了一些关键指导。本文将对这些规约进行详细探讨，并通过代码示例阐释其重要性。
## 1. Python命名约定
在Python中，命名约定主要包括变量名、函数
# 数值规约Python实现
## 引言
数值规约是数据预处理的重要一步，它用于缩小数据范围或者将数据转换为可接受的格式。在Python中，我们可以使用一些库和函数来实现数值规约。本文将介绍数值规约的流程，并提供详细的代码示例和注释。
## 数值规约的流程
下面是数值规约的一般流程：
| 步骤 | 描述 |
| ---- | ---- |
| 1 | 导入所需的库 |
| 2 | 加载数据
原创
2024-02-02 09:19:38
56阅读
Python正式实习的第二天学习内容较多，故发多篇Blog进行记录。 和大多数高级程序语言一样，Python也鼓励程序员使用模块化开发，即对于函数的使用。一、内建函数 Python也内建了许多函数可供调用，例如求绝对值函数与强制数据类型转换函数abs(-5)
str(100二、定义函数的规则 与C++不同，在Python中自定义一个函数有以下规则。 1、定义函数前无需声明返回值，而是统一使用def
五、数据规约数据归约（Data Reduction）用于在尽可能保持数据完整性的基础上得到数据的归约表示。也就是说，在归约后的数据集上挖掘将更有效，而且仍会产生相同或相似的分析结果。数据归约包括维归约、数量归约和数据压缩。（一）维归约维归约的思路是减少所考虑的随机变量或属性的个数，使用的方法有属性子集选择、小波变换和主成分分析。属性子集选择是一种维归约方法，其中不相关、弱相关或冗余的属性或维被检测
转载
2023-11-22 19:06:28
21阅读
2. 规约Combiner每一个 map 都可能会产生大量的本地输出，Combiner 的作用就是对 map 端的输出先做 一次合并，以减少在 map 和 reduce 节点之间的数据传输量，以提高网络IO 性能，是 MapReduce 的一种优化手段之一combiner 是 MR 程序中 Mapper 和 Reducer 之外的一种组件combiner 组件的父类就是 Reducerc...
原创
2022-03-04 16:43:02
108阅读
2. 规约Combiner每一个 map 都可能会产生大量的本地输出，Combiner 的作用就是对 map 端的输出先做 一次合并，以减少在 map 和 reduce 节点之间的数据传输量，以提高网络IO 性能，是 MapReduce 的一种优化手段之一combiner 是 MR 程序中 Mapper 和 Reducer 之外的一种组件combiner 组件的父类就是 Reducerc...
原创
2021-08-18 10:40:43
146阅读
数据规约再大数据集上进行复杂得数据分析和挖掘需要很长得时间,数据规约产生更小但保持原数据完整性得新数据集,再规约后得数据集上进行分析和挖掘将更有效率数据规约得意义降低无效,错误数据对建模得影响,提高建模得准确性少量且具有代表性得数据将大幅缩减数据挖掘所需得时间降低存储数据得成本属性规约
属性规约通过属性合并来创建新属性维数,或者直接通过删除不相关得属性(维)来减少数据维数,从而提高数据挖掘得效率,
转载
2024-04-22 21:58:25
101阅读
1.为什么要把降维作为一个单独的预处理步骤？复杂度依赖于输入的维度d和数据样本的规模N，为了减少存储量和计算时间。较简单的模型在小数据集上更为鲁棒，较简单的模型具有较小的方差。当数据能够用较少特征解释时，就能够更好地理解解释数据的过程，使得能够提取知识。当数据能够用少数维表示而不丢失信息时，我们可以对数据绘图，并且可视化地分析它的结构和离群点。降维的主要方法有两个：特征选择和特征提取。特征选择是从
转载
2023-12-15 17:35:58
70阅读
现在网上有很多类似的文章、其实这一篇也借鉴了很多其他博主的文章。写这篇文章的重点是在于解析功能和报文、对MMS这个协议并不会做很多介绍。好了，我们开始吧。MMS协议的协议规范取决于IEC61850规范从报文来看mms协议共有tpkt cotp mms 下图为mms协议整体报文结构之前的tpkt 和 cotp这一块的就不展开进行介绍了，可以自行去了解一下（我们主要是讲MMS这一层）Ini
转载
2023-12-29 23:12:53
905阅读
python002 Python3 基础语法编码默认情况下，Python 3 源码文件以 UTF-8 编码，所有字符串都是 unicode 字符串。 当然你也可以为源码文件指定不同的编码：# -*- coding: cp-1252 -*-标识符 第一个字符必须是字母表中字母或下划线'_'。 标识符的其他的部分有字母、数字和下划线组成。 标识符对大小写敏感。在Python 3中，非-ASCII
服务通讯前言理论模型自定义srv文件Package调整CmakeLists调整服务器实现C++python客户端实现C++python测试与注意事项 前言本文主要是跟着audolabor学习ROS笔记，多为操作性质，并从另一种角度对实现的顺序进行调整理论模型 与之前话题通讯之间有所区别，服务通讯适用于这样的场景：服务器处有一个公共资源，客户端可以调用这个资源，进行运算或者得到某些数据。而话题通讯
# 实现104规约的Python示例
104规约是一种网络协议，广泛应用于智能出货机和自动贩卖机等设备中。以下步骤将指导你如何实现104规约的基本功能，同时为你提供相应的 Python 代码示例。
## 实现步骤
我们可以将实现过程分为以下几个步骤：
| 步骤 | 说明 |
|------|--------------------------
原创
2024-09-04 05:20:18
71阅读
# Python子函数规约
在Python中，函数是一种非常重要的概念。它是一段可重复使用的代码，用于执行特定的任务。在编写大型程序时，函数能够帮助我们将代码分解成小块，使得程序结构更加清晰，易于维护和扩展。
在函数的定义中，有一个重要的概念叫做子函数。子函数指的是在函数内部定义的函数，它们被称为嵌套函数或内部函数。子函数只能在父函数内部被调用，外部无法直接访问到它们。通过使用子函数，我们可以
原创
2023-12-21 05:44:37
51阅读
一、通信中包含的主要内容： 客户端 &nb
转载
2024-09-17 12:24:56
38阅读
