无线通信中使用的频段只是电磁波频段中很小的一部分，定义了无线电波的频率范围。 为了合理使用频谱资源，保证各种行业和业务使用频谱资源时彼此之间不会干扰，国际电信联盟无线委员会(ITU-R)颁布了国际无线电规则，对各种业务和通信系统所使用的无线频段都进行了统一的频率范围规定。 这些频段的频率范
转载
2023-09-05 11:11:34
3阅读
# 使用Python进行等频划分
等频划分是数据预处理中的一种常见技术，主要用于将数据集中的数值特征划分为若干个区间，使得每个区间内的样本数量基本相同。这在处理数据时有助于消除数据的偏倚。本文将通过实例来教你如何在Python中实现等频划分。我们将通过几个清晰的步骤来完成这一任务。
## 整体流程
下面是实现等频划分的整体流程：
| 步骤 | 描述
原创
2024-09-05 06:43:58
72阅读
分箱的基评估标准是依靠WOE与IV值，常用的方法是等频、等距、best_ks、卡方。决策树里对于连续值采用信息熵、信息增益率、方差、基尼系数等来进行拆分的选择。它们本质上是一样的，都是为了寻找最佳的拆分方式，具有最好的表达能力。只不过一个不是用模型能力表现，一个是用模型能力表现。等频分箱对连续变量从小到大排序，使用频次百分比qcut分割的方式对连续变量进行分箱，使得每个区间具有数量相同的样本量。等
转载
2023-12-20 18:37:16
293阅读
第一四分位数Q1：又称“下四分位数”，等于该样本中所有数值由小到大排列后第25%的数字。 箱线图判断异常值的标准以四分位数和四分位距为基础。 &nb
转载
2023-12-16 10:33:15
213阅读
1.离散的优势：（1）离散化后的特征对异常数据有很强的鲁棒性：比如一个特征是年龄>30是1，否则0。如果特征没有离散化，一个异常数据“年龄300岁”会给模型造成很大的干扰；（2）逻辑回归属于广义线性模型，表达能力受限，单变量离散化为N个后，每个变量有单独的权重，相当于为模型引入了非线性，能够提升模型表达能力，加大拟合；（3）离散化后可以进行特征交叉，由M+N个变量变为M*N个变量，进一步引入
转载
2023-09-04 22:13:53
251阅读
等频分箱和等距分箱是无监督分箱，卡方分箱和最小熵值分箱是有监督分箱，需要指定标签。等频分箱区间的边界值要经过选择,使得每个区间包含大致相等的实例数量。比如说 N=10 ,每个区间应该包含大约10%的实例。 无法使用pd.qcut，用Rank_qcut替代def Discretization_EqualFrequency(bins_number, data: pd.DataFrame):
"""
转载
2023-08-04 10:20:44
333阅读
无监督分箱法:等距划分、等频划分等距分箱 从最小值到最大值之间,均分为 N 等份, 这样, 如果 A,B 为最小最大值, 则每个区间的长度为 W=(B−A)/N , 则区间边界值为A+W,A+2W,….A+(N−1)W 。这里只考虑边界，每个等份里面的实例数量可能不等。 等频分箱 区间的边界值要经过选择,使得每个区间包含大致相等的实例数量。比如说 N=10
转载
2023-07-28 20:42:21
183阅读
我们在临床研究中，经常需要对数据进行转换，有时需要把连续变量转换成分类变量，然后观察分类变量的之间关系。例如下图按照百分位把数据分成了5组 我们今天通过SPSS数据可视化分箱来演示怎么进行连续数据等分分组，继续使用我们的乳腺癌数据（公众号回复：乳腺癌可以获得该数据），我们先导入数据 age表示年龄，pathsize表示病理肿瘤大小（厘米），lnpos表示腋窝淋巴结阳性，histgrad表示病理组织
转载
2023-11-03 15:21:11
115阅读
在一些算法中，需要将具有连续属性的特征转换成离散属性的特征。离散化后的特征对于异常数据会有更强的鲁棒性，模型会更加的稳定。在建立分类模型时，例如：逻辑回归的算法，对数据进行预先的离散化，可以十分有效地提高模型的结果。 在这里我主要记录并介绍我最近自己使用的等频分箱的代码。等频离散化等频离散化顾名思义，使划分的区间中，样本数量尽量保持一致。 例如对数据【2,2,3,4,8,10,12,16,17】。
转载
2023-09-18 20:58:56
344阅读
无监督分箱法:等距划分、等频划分等距分箱从最小值到最大值之间,均分为 N 等份, 这样, 如果 A,B 为最小最大值, 则每个区间的长度为 W=(B−A)/N , 则区间边界值为A+W,A+2W,….A+(N−1)W 。这里只考虑边界，每个等份里面的实例数量可能不等。等频分箱区间的边界值要经过选择,使得每个区间包含大致相等的实例数量。比如说 N=10 ,每个区间应该包含大约10%的实例。以上两种算
转载
2023-08-30 08:21:04
280阅读
对数据集分箱的方式三种，等宽等频最优，下面介绍对数据集进行最优分箱，分箱的其他介绍可以查看其他的博文，具体在这就不细说了：大体步骤：加载数据；遍历所有的feature, 分别处理离散和连续特征；得到IV树；递归遍历IV树，得到分割点构成的列表；去掉不符合条件的分割点，得到最优分割点列表；遍历最优分割点列表，将最优分割点信息注入到InfoValue对象中；将每个特征构成的对象放到规则集中（是一个列表
转载
2024-02-26 07:16:09
76阅读
47_Pandas使用cut和qcut函数进行分箱处理分箱处理（bin Division）是将连续值除以任意边界值，将其划分为类别，再将其转换为离散值的处理。它通常作为机器学习的预处理完成。 比如有一个过程，比如将年龄数据分为十几岁和二十几岁。根据值拆分：cut() 按数量拆分：qcut()它们是有区别的。在这里，下面的内容将讲解如何使用pandas.cut()和pandas.qcut()。等分或
转载
2024-04-10 20:28:48
245阅读
1规定划分区间的参数，取定长的间隔将特征放入不同的箱子中，这种方法对异常点比较敏感。(等宽)2 根据频率划分箱子，会出现特征相同却不在一个箱子中的情况，需要在划分完成后进行微调。（等频）先对特征值进行sort，然后评估分割点，划分或者合并3 1R方法：将前面的m个实例放入箱子中如果后面实例放入箱子时，比对当前实例的标签是否与箱子中大部分实例标签相同，如果相同就放入，如果不相同就形成下一个m大小的新
转载
2023-06-01 15:47:46
205阅读
# 等频分箱python：如何将连续数据划分为相等数量的箱子
在数据分析中，等频分箱是一种常用的数据预处理技术，它可以帮助我们将连续型数据划分为多个相等数量的箱子，从而更好地理解数据分布情况。在本文中，我们将介绍等频分箱的概念、原理和实现方法，并使用Python代码示例演示具体的操作步骤。
## 什么是等频分箱
等频分箱（equal frequency binning）是一种数据分箱技术，它
原创
2024-03-21 07:01:59
321阅读
# Python等频分箱实现
## 简介
等频分箱是一种常用的数据预处理技术，它可以将连续变量离散化为多个等频的区间。在数据分析和建模过程中，等频分箱常用于对连续变量进行离散化处理，以便更好地发现其内在规律。本文将向你介绍如何使用Python实现等频分箱。
## 流程概览
下面是实现等频分箱的整个流程概览，我们将按照以下步骤逐步实现等频分箱。
|步骤|描述|
|---|---|
|1. 数据
原创
2023-09-03 15:27:23
559阅读
## Python等频分箱
### 1. 引言
在数据分析和建模中，经常需要对连续型变量进行分箱处理。分箱可以将连续型变量离散化成几个有限的区间，从而减少模型的复杂度，提高模型的解释性。而等频分箱是一种常见的分箱方法，它将变量的取值按照出现的频率均匀划分成多个区间。本文将介绍如何使用Python对连续型变量进行等频分箱，并提供了相应的代码示例。
### 2. 等频分箱的原理
等频分箱的原理
原创
2023-09-22 00:28:10
531阅读
# 等频分箱在Python中的应用
在数据分析与处理的过程中，数据分箱是一种非常重要的技术。分箱能够将连续变量转化为离散变量，从而使得模型的创建与分析更加简便。本文将重点介绍等频分箱（Quantile Binning）的原理及其在Python中的实现，并配有代码示例。
## 什么是等频分箱？
等频分箱是将数值数据划分为几个区间（或称为"箱"），每个区间内部的数据量大致相同。这种方法常用于处理
原创
2024-09-06 05:22:27
368阅读
# 分箱：Python中的等频分箱方法
在数据分析中，分箱是一种常用的数据预处理方法，可以将连续变量离散化，便于进行统计分析和建模。本文将介绍Python中实现等频分箱的方法，并以代码示例进行说明。
## 等频分箱的概念
等频分箱是将数据分为若干个箱子，每个箱子中的观测值数量大致相等。这种方法可以减少数据的波动性，提高模型的稳定性。
## Python实现等频分箱
在Python中，我们
原创
2024-07-29 10:10:00
44阅读
我们经常会在数据分析中碰到这样的一些问题：这组数据都有哪些值？这些值又各自出现了多少次？数据如果不多，我们直接掐指一算也就搞定了。如果数据多指头到不够用，那怎么办呢？在pandas中，应对频数统计，我们就不得不谈一谈value_counts()了。一、离散型数据对于离散型数据，我们可以通过value_counts()的方法来统计各个离散值的频数情况，如下图我们先构造一个Series：接下来我想知道
转载
2023-08-29 17:04:05
205阅读
分箱方法分为无监督分箱和有监督分箱。常用的无监督分箱方法有等频分箱，等距分箱和聚类分箱。有监督分箱主要有最优分箱（Gini等）和卡方分箱。怎么定义有没有监督的学习，其实就是看有没有y值在里面做标签。这里所提到的无监督分箱里的等频分箱、等距分箱和聚类分箱，就是不用y值在里面做参考判定的。无监督的方法 等频分箱——就是均分的思想，比如我有一堆数，平均分成几堆，每一堆的数量都是一样的； 等距
