K哥爬虫的博客_(3)

【0基础学爬虫】爬虫基础之代理的基本使用

大数据时代，各行各业对数据采集的需求日益增多，网络爬虫的运用也更为广泛，越来越多的人开始学习网络爬虫这项技术，K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章，为实现从易到难全方位覆盖，特设【0基础学爬虫】专栏，帮助小白快速入门爬虫，本期为代理的基本使用。代理概述 ip地址是一个唯一地址，它用于标识互联网或本地网络设备，而代理ip又名代理服务器（Proxy Server），它的主要作用是作为

python

客户端

服务端

原创 2023-03-23 16:21:07 94 阅读

【0基础学爬虫】爬虫基础之网络请求库的使用

大数据时代，各行各业对数据采集的需求日益增多，网络爬虫的运用也更为广泛，越来越多的人开始学习网络爬虫这项技术，K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章，为实现从易到难全方位覆盖，特设【0基础学爬虫】专栏，帮助小白快速入门爬虫，本期为网络请求库的使用。网络请求库概述作为一名爬虫初学者，熟练使用各种网络请求库是一项必备的技能。利用这些网络请求库，我们可以通过非常简单的操作来进行各种协议

数据挖掘

逆向

原创精选 2023-03-23 15:37:49 373 阅读

【0基础学爬虫】爬虫基础之抓包工具的使用

大数据时代，各行各业对数据采集的需求日益增多，网络爬虫的运用也更为广泛，越来越多的人开始学习网络爬虫这项技术，K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章，为实现从易到难全方位覆盖，特设【0基础学爬虫】专栏，帮助小白快速入门爬虫，本期为抓包工具的使用。抓包工具概述抓包工具，顾名思义，就是抓取网络数据包信息的工具。抓包工具最初主要应用于测试工作中，通过抓包工具查看网络数据包，并进行分析，

数据挖掘

逆向

原创 2023-03-16 16:18:27 158 阅读

【验证码逆向专栏】某验四代五子棋、消消乐验证码逆向分析

声明本文章中所有内容仅供学习交流使用，不用于其他任何目的，不提供完整代码，抓包内容、敏感网址、数据接口等均已做脱敏处理，严禁用于商业用途和非法用途，否则由此产生的一切后果均与作者无关！本文章未经许可禁止转载，禁止任何修改后二次传播，擅自使用本文讲解的技术而导致的任何意外，作者均不负责，若有侵权，请在公众号【K哥爬虫】联系作者立即删除！逆向目标目标：某验四代消消乐、五子棋验证码，w 参

验证码

滑块

抓包

原创 2023-03-15 11:10:04 304 阅读

【0基础学爬虫】爬虫基础之网页基本结构

大数据时代，各行各业对数据采集的需求日益增多，网络爬虫的运用也更为广泛，越来越多的人开始学习网络爬虫这项技术，K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章，为实现从易到难全方位覆盖，特设【0基础学爬虫】专栏，帮助小白快速入门爬虫，本期为网页基本结构介绍。网页概述网页是互联网应用的一种形态，是组成网站的基本元素。它是一个包含HTML标签的纯文本文件，可以存放在世界上任意一台计算机中。网页

HTML

选择器

CSS

原创 2023-03-10 11:11:41 299 阅读

【K哥爬虫普法】字节前高管，离职后入侵今日头条数据库，是阴谋、还是利诱？

案情介绍 2016年至2017年间，张洪禹、宋某、侯明强作为被告单位上海晟品网络科技有限公司主管人员，在上海市共谋采用技术手段抓取北京字节跳动网络技术有限公司（办公地点位于本市海淀区北三环西路43号中航广场）服务器中存储的视频数据，并由侯明强指使被告人郭辉破解北京字节跳动网络技术有限公司的防抓取措施、实施视频数据抓取行为，造成被害单位北京字节跳动网络技术有限公司损失技术服务费人民币2万元。上

数据

服务器

网络技术

原创 2023-03-10 10:19:15 205 阅读

【验证码逆向专栏】某验三代、四代一键通过模式逆向分析

声明本文章中所有内容仅供学习交流，抓包内容、敏感网址、数据接口均已做脱敏处理，严禁用于商业用途和非法用途，否则由此产生的一切后果均与作者无关，若有侵权，请联系我立即删除！本文章未经许可禁止转载，禁止任何修改后二次传播，擅自使用本文讲解的技术而导致的任何意外，作者均不负责，若有侵权，请在公众号【K哥爬虫】联系作者立即删除！逆向目标目标：某验三代、四代一键通过模式（无感验证）逆向分析三代

数据挖掘

逆向

原创 2023-03-01 14:59:24 188 阅读

【K哥爬虫普法】百度、360八年恩怨情仇，robots 协议之战终落幕

!00(https://s2.51cto.com/images/blog/202302/20095953_63f2d419dd7e8632.jpg)我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，知晓如何合法合规利用爬虫技术，警钟长鸣，做一个守法、护法、有原则的技术人员

数据挖掘

逆向

原创 2023-02-20 09:59:55 105 阅读

【0基础学爬虫】爬虫基础之爬虫的基本介绍

!00(https://s2.51cto.com/images/blog/202302/10163022_63e6009e95ed785371.png)大数据时代，各行各业对数据采集的需求日益增多，网络爬虫的运用也更为广泛，越来越多的人开始学习网络爬虫这项技术，K哥爬虫此前已经推出不少爬虫进阶、逆向相关文章，为实现从易到难全方位覆盖，特设【0基础学爬虫】专栏，帮助小白快速入门爬虫，本期为爬虫的基本

数据挖掘

逆向

原创 2023-02-10 16:30:44 134 阅读

【验证码逆向专栏】某验“初代”滑块验证码逆向分析

!00(https://s2.51cto.com/images/blog/202302/06102124_63e06424bd59351503.png?xossprocess=image/watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_20,type_ZmFuZ3poZW5naGVpd

滑块

验证码

搜索

原创 2023-02-06 10:21:48 186 阅读

【K哥爬虫普法】被中间商抽走八成报酬，还因此锒铛入狱

!01(https://s2.51cto.com/images/blog/202301/18110054_63c760e65824376646.jpg?xossprocess=image/watermark,size_14,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_20,type_ZmFuZ3poZW5naGVpd

数据

请求头

系统程序

原创 2023-01-18 11:02:02 184 阅读

【验证码逆向专栏】某验四代滑块验证码逆向分析

声明本文章中所有内容仅供学习交流，抓包内容、敏感网址、数

滑块

验证码

随机数

原创 2023-01-08 01:26:05 387 阅读

【K哥爬虫普法】大数据风控第一案：从魔蝎科技案件判决，看爬虫技术刑事边界

!01(https://s2.51cto.com/images/blog/202301/04135454_63b514aeb7dc282016.jpg)我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，知晓如何合法合规利用爬虫技术，警钟长鸣，做一个守法、护法、有原则的技术

数据挖掘

逆向

原创 2023-01-04 13:54:57 119 阅读

【k哥爬虫普法】Python程序员爬取视频资源13万部，一分钱没挣，获刑2年！

我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K 哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，...

视频网站

动漫

文件名

原创 2022-12-27 17:02:35 173 阅读

【JS 逆向百例】某网站加速乐 Cookie 混淆逆向详解

声明本文章中所有内容仅供学习交流，抓包内容、敏感网址、数据接口均已做脱敏处理，严禁用于商业用途和非法用途，否则由此产生的一切后果均与作者无关，若有侵权，请我立即删除！逆向目...

抓包

状态码

bc

原创 2022-12-27 16:57:58 333 阅读

【k哥爬虫普法】程序员183并发爬取官方网站，直接获刑3年？

我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K 哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，...

IP

数据

服务器

原创 2022-12-27 16:57:17 66 阅读

百度指数 Cipher-Text、百度翻译 Acs-Token 逆向分析

K 哥之前写过一篇关于百度翻译逆向的文章，也在 bilibili 上出过相应的视频，最近在 K 哥爬虫交流群中有群友提出，百度翻译新增了一个请求头参数 Acs-Token，如果不携带该参数，直接按照以前...

百度翻译

时间戳

Text

原创 2022-12-27 16:56:07 494 阅读

【K哥爬虫普法】老铁需要车牌靓号吗？判刑的那种

我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K 哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，...

信息系统

数据库

正常运行

原创 2022-12-26 17:12:49 69 阅读

【k哥爬虫普法】爬取数据是否一定构成不正当竞争？

我国目前并未出台专门针对网络爬虫技术的法律规范，但在司法实践中，相关判决已屡见不鲜，K 哥特设了“K哥爬虫普法”专栏，本栏目通过对真实案例的分析，旨在提高广大爬虫工程师的法律意识，知晓如何合法合规利用爬虫技术，警钟长鸣，做一个守法、护法、有原则的技术人员。案情介绍谷米公司为开发和运营“酷米客”APP（提供实时公交查询服务），与公交公司达成合作，在公交车上安装定位器，以获取实时公交位置数据。谷米公司

数据

信息系统

获取数据

原创 2022-12-26 12:10:13 144 阅读

【验证码逆向专栏】某片滑块、点选验证码逆向分析

声明本文章中所有内容仅供学习交流使用，不用于其他任何目的，不提供完整代码，抓包内容、敏感网址、数据接口等均已做脱敏处理，严禁用于商业用途和非法用途，否则由此产生的一切后果均与作...

验证码

滑块

json

原创 2022-12-25 10:44:58 598 阅读

【验证码逆向专栏】某验三代滑块验证码逆向分析

声明本文章中所有内容仅供学习交流，抓包内容、敏感网址、数据接口均已做脱敏处理，严禁用于商业用途和非法用途，否则由此产生的一切后果均与作者无关，若有侵权，请联系我立即删除！本文章...

ide

php

滑块

原创 2022-12-25 10:44:46 330 阅读