效果评估是模型选择和算法设计的重要步骤，知道评估优劣才能选择最佳的模型和算法，本节介绍一些有关评估方法的定义，凡是在统计或大数据领域都用得到 真阳性 true positives, TP 真阴性 true negatives, TN 假阳性 false positives, FP 假阴性 false negatives, FN) 准确率 分类器预测正确性的比例
说到softmax和sigmoid二者差别，就得说说二者分别都是什么。其实很简单，网上有数以千计的优质博文去给你讲明白，我只想用我的理解来简单阐述一下：sigmoid函数针对两点分布提出。神经网络的输出经过它的转换，可以将数值压缩到(0,1)之间，得到的结果可以理解成“分类成目标类别的概率P”。而不分类到该类别的概率，就是(1 - P)，这也是典型的两点分布的形式；softmax本身针对多项分布提
转载
2024-05-30 19:48:53
196阅读
二分类问题评价指标评价指标准确率精确率召回率F1值ROCAUC 评价指标二分类问题评价指标的相关整理，持续更新。评价指标是针对同样的数据，输入不同的算法，或者输入相同的算法但参数不同而给出这个算法或者参数好坏的定量指标。二类分类问题常用的评价指标是精准度（precision）、召回率（recall）、F1值 通常以关注的类为正类，其他类为负类，混淆矩阵表示如下： TP—将正类预测为正类数 FN—
算法的理解 Bi这里是的意思就是Binary，二进制的意思，所以有时候叫这个算法为二进Kmeans算法。为什么我们需要用BiKmeans呢，就是为了解决初始化k个随机的质心点时其中一个或者多个点由于位置太极端而导致迭代的过程中消失的问题。BiKmeans只是Kmeans其中一个优化方案，其实还是有很多优化的方案，这里BiKmeans容易讲解和理解，并且容易用numpy, pandas实现。 那为什
本文目录详解SVM一、什么是SVM1. SVM定义2. 函数间隔和几何间隔（1）函数间隔（2）几何间隔3. 支持向量二、SVM求解1. 问题描述2. SVM的对偶形式（1）对偶形式（2）求解（3）KKT条件 详解SVM一、什么是SVMSVM是一种二类分类模型，与感知机不同的是，他的基本模型是定义在特征空间上的间隔最大的线性分类器。支持向量机还包括核技巧，使他成为实质上的非线性分类器。一句话总结：
转载
2024-09-26 13:29:37
73阅读
1. 常用的激活函数1.1 Sigmoid函数 Sigmoid函数的数学表达形式为：，它接受一个实数并将其压缩到0-1的范围内，其中大的负数将会变成0，而大的正数将会变成1。在历史上，sigmoid函数被经常使用到，因为它对神经元的激活有很好的解释性：从完全未激活的状态0，到完全饱和的激活状态1。实际上，
转载
2024-09-10 06:42:20
518阅读
目录 二分类：多分类：一、什么是多类分类？二、如何处理多类分类？三、代码实践：评估指标：混淆矩阵，accuracy，precision，f1-score，AUC，ROC，P-R（不能用）1.混淆矩阵：2. accuracy，precision，reacall，f1-score：3. ROC图和AUC值：4 . 多类分类问题不能用P-R曲线 5.其他评分函数 ： score&nb
转载
2024-08-27 21:50:52
66阅读
。前面介绍了很多二分类资料的模型评价内容，用到了很多R包，虽然达到了目的，但是内容太多了，不太容易记住。今天给大家介绍一个很厉害的R包：tidymodels，一个R包搞定二分类资料的模型评价和比较。一看这个名字就知道，和tidyverse系列师出同门，包的作者是大佬Max Kuhn，大佬的上一个作品是caret，现在加盟rstudio了，开发了新的机器学习R包，也就是今天要介绍的tidymodel
转载
2024-03-13 11:30:28
100阅读
1、背景应用背景是一个企业非法集资风险预测的竞赛，赛题提供了各个企业多维度特征的数据以及标注了部分企业有无非法集资风险的数据，目的是根据所提供的企业数据资料去预测出未标注的企业有无非法集资风险。其中有非法集资风险标注为1，无非法集资风险标注为0。该问题可以归结为一个二分类问题。本文采用keras框架搭建神经网络（keras框架高度模块化，使用简单上手快，以Tensorflow、Theano或CNT
转载
2024-04-09 02:04:59
369阅读
很算法在原理推导上都是假设样本是二分类的，比如SVM、Adaboost等，整个推导过程以至结论都是相对二分类的，根本没有考虑多分类，如果你想直接将SVM直接应用在多分类上是不可能的，除非你在从原理上去考虑多分类的情况，然后得到一个一般的公式，最后在用程序实现这样才可以。通常情况是将多分类转化为二分类问题。 那么多分类问题怎么转化为二分类问题？很简单，一个简单的思想就是分主次，采取投票机制。
在文章NLP（二十）利用BERT实现文本二分类中，笔者介绍了如何使用BERT来实现文本二分类功能，以判别是否属于出访类事件为例子。但是呢，利用BERT在做模型预测的时候存在预测时间较长的问题。因此，我们考虑用新出来的预训练模型来加快模型预测速度。 本文将介绍如何利用ALBERT来实现文本二分类。关于ALBERT ALBERT的提出时间大约是在2019年10月，其第一作者为谷歌科学家蓝振忠
逻辑回归基本概念 前面提到过线性模型也可以用来做分类任务，但线性模型的预测输出 y = wx + b 可能是（-∞，+∞）范围内的任意实数，而二分类任务的输出y={0,1}，如何在这之间做转换呢？答案就是找一个单调可微函数将分类任务输出y和线性回归模型联系起来，对数几率函数（Sigmoid函数）可以很好地胜任这个工作，函数图形如下，预测值z大于零判
转载
2024-03-29 06:47:34
195阅读
说到softmax和sigmoid二者差别，就得说说二者分别都是什么。其实很简单，网上有数以千计的优质博文去给你讲明白，我只想用我的理解来简单阐述一下：sigmoid函数针对两点分布提出。神经网络的输出经过它的转换，可以将数值压缩到(0,1)之间，得到的结果可以理解成“分类成目标类别的概率P”。而不分类到该类别的概率，就是(1 - P)，这也是典型的两点分布的形式；softmax本身针对多项分布提
转载
2023-06-21 22:32:10
830阅读
本文章参考deeplearning 一书第六章6.2.2.2 Sigmoid Units for Bernoulli Output Distributions 要建立一个模型，不可或缺的有：1、数据，2、损失函数，3、模型算法，4、优化算法。今天我们讨论下损失函数这块。损失函数的设计，与模型最后输出的内容是有一定关联的。所以我们今天讨论二分类问题的损失函数时，主要
跑一个简短的程序from tensorflow import keras
from tensorflow.keras.models import Sequential
from tensorflow.keras.layers import Dense, Activation
from tensorflow.keras import optimizers
import numpy as np
imp
转载
2024-03-16 00:59:41
158阅读
二分类下，sigmoid、softmax两者的数学公式是等价的，理论上应该是一样的，但实际使用的时候还是sigmoid好为什么好？其实现在我得到一个确切的答案！ 多个sigmoid与一个softmax都可以进行多分类如果多个类别之间是互斥的，就应该使用softmax，即这个东西只可能是几个类别中的一种。如果多个类别之间不是互斥的，使用多个sigmoid。比如4个类别人声音乐、舞曲、影视原声、流行
转载
2019-08-19 21:08:00
1166阅读
2评论
文章目录引言ROC的引入混淆矩阵ROC曲线的解释EERAUC 引言 本文旨在介绍ROC曲线及其前置概念如混淆矩阵、FPR、TPR等，还有其引申概念EER、AUC等等。ROC的引入 ROC曲线是一张用于评价二分类模型的曲线图，典型如下图所示： 理论上来说，该曲线越靠近坐标系的左上角说明该二分类器的表现越好，一个理想的二分类的ROC曲线应如下图所示：混淆矩阵 为了了解ROC曲线横纵轴所代表的意义及曲
转载
2024-04-22 22:24:52
91阅读
基础监督学习经典模型监督学习任务的基本架构和流程： 1.准备训练数据； 2.抽取所需特征，形成用于训练特征向量(Feature Vectors)； 3.训练预测模型(Predictive Model)； 4.抽取测试数据特征，得到用于测试的特征向量； 5.使用预测模型对待测试特征向量进行预测并得到结果(Label/Target)。分类学习 1.二分类（Binary Classifica
转载
2023-11-03 05:55:58
147阅读
本篇记录一下如何使用bert进行二分类。这里用到的库是pyotrch-pretrained-bert，原生的bert使用的是TensorFlow，这个则是pytorch版本。本篇文章主要参考了基于BERT fine-tuning的中文标题分类实战的代码以及如何用 Python 和 BERT 做中文文本二元分类？的数据。本文的github代码地址：https://github.com/sky9452
转载
2023-11-14 21:42:31
135阅读
前言最近在b站发现了一个非常好的 计算机视觉 + pytorch实战 的教程，相见恨晚，能让初学者少走很多弯路。 因此决定按着up给的教程路线：图像分类→目标检测→…一步步学习用 pytorch 实现深度学习在 cv 上的应用，并做笔记整理和总结。up主教程给出了pytorch和tensorflow两个版本的实现，我暂时只记录pytorch版本的笔记。pytorch官网入门demo——实现一个图像
转载
2023-08-25 19:01:04
252阅读
