这些都是笔记，还缺少详细整理，后续会更新。下面这种方式,属于入门阶段,手动成分比较多. 首先安装必要组件:pip3 install requestspip3 install beautifulsoup4 一、爬汽车之家#!/usr/bin/env python
# coding:utf-8
import requests
from bs4 import BeautifulSo
转载
2023-10-07 23:42:40
34阅读
?来到第二篇爬虫入坑文章，寻思着第二篇应该放哪一个项目上来比较好，经过考虑，把一个较为简单的放上来了。直接进入正题，介绍这次项目-任意贴吧的爬虫?要求：可以指定贴吧名称, 起始页与结束页爬取帖子标题、摘要、贴主（楼主）、帖子回复数、最后评论人只能用requests、re实现看过上一篇爬虫系列文章的同学应该清楚大致的爬虫流程了，我们再来回顾一哈从url中提取响应内容分析响应内容（页面），提取url，
Beautiful Soup 库一般被称为bs4库，支持Python3，是我们写爬虫非常好的第三方库。因用起来十分的简便流畅。所以也被人叫做“美味汤”。目前bs4库的最新版本是4.60。下文会介绍该库的最基本的使用，具体详细的细节还是要看：[官方文档](Beautiful Soup Documentation)bs4库的安装Python的强大之处就在于他作为一个开源的语言，有着许多的开发者为之开发
转载
2023-11-18 16:32:37
33阅读
## Python爬取小说网站上的全部小说
在互联网时代，我们可以通过各种网站在线阅读各种小说，但是有时候我们希望将这些小说保存到本地以便离线阅读。本文将介绍如何使用Python的BeautifulSoup库(bs4)爬取小说网站上的全部小说，并保存到本地。
### 准备工作
在开始之前，我们需要安装一些Python库。使用pip命令安装以下库：
```
pip install reque
原创
2024-02-04 10:11:21
246阅读
Python中bisect的用法及示例详解
bisect是python内置模块，用于有序序列的插入和查找。
查找： bisect(array, item)
插入： insort(array,item)
查找
import bisect
a = [1,4,6,8,12,15,20]
position = bisect.bisect(a,13)
print(position)
# 用可变序列内置的in
当我们取得了网页的response之后，最关键的就是如何从繁杂的网页中把我们需要的数据提取出来，python从网页中提取数据的包很多，常用的有下面的几个：BeautifulSoup 它基于HTML代码的结构来构造一个Python对象， 对不良标记的处理也非常合理，但是速度上有所欠缺。lxml 是一个基于 ElementTree (不是Python标准库的一部分)的python化的XML解析库(也可
转载
2024-01-11 23:52:22
52阅读
1、HTTP协议简介 超文本传输协议（英文：HyperText Transfer Protocol，缩写：HTTP）是应用层协议。HTTP是万维网的数据通信的基础。2、HTTP协议概述 HTTP是一个客户端终端（用户）和服务器端（网站）请求和应答的标准（TCP）。通过使用网页浏览器、网络爬虫或者其它的工具，客户端发起一个HTTP请求到服务器上指定端口（默认端口为80）。我们称这个客户端为用户代理程
1.定义：用来从逻辑上组织Python代码，实现功能的py文件2.导入方法importsysimportsys,osfromosimportpathimportcx_oracleasora3.import本质导入模块就是把模块解释一遍导入包Package就是执行包下的init导入的时候寻找包或模块是从sys.path找起，可以用sys.path.append('新路径')增加寻找范
原创
2018-01-05 23:09:57
562阅读
### 序列化是什么？ 现在的序列化都是转向一个字符串数据类型，我们说的序列就是字符串， 为什么要千方百计的转换成为字符串呢？ 是为了存储和传递 如果一个字典{"k":"v"}为什么要转成字符串 1，我往文件或者数据库里面写内容的时候是不能写入字典的，可以写入字符串，2，还有在网络上传输的时候，我需 ...
转载
2021-09-11 05:05:00
52阅读
2评论
什么是4G模块4G模块，也被叫做4G通信模块或4G DTU模块，他是物联网行业具有4G通信功能的一种产品，通过4G模块，我们可以实现工业设备数据通过无线4G网络传输到远端控制中心，并从控制中心通过4G模块远程对工业设备进行数据通信。从而实现工业设备通过无线4G网络的集中管理集中监控。通过4G模块可大大的减少运营人工成本。 4G模块的工作原理近年来物联网行业飞速发展，通过各种物
转载
2023-07-19 14:38:45
627阅读
设置延迟 涉及到多页数据爬取的时候，最好不要太频繁，可以自己主动设置延迟 for i in range(1, 5): time.sleep(1) get_price_data(i) 爬虫解析库之bs4模块 全名：Beautiful Soup4 是一个可以从HTML或XML文件中提取数据的Python ...
转载
2021-09-21 19:38:00
229阅读
2评论
在 Tkinter 中，Title 指的是窗口的标题栏文本。下面详细解析标题的设置、修改和相关用法。基本标题设置import tkinter as tk
# 创建主窗口
root = tk.Tk()
# 设置窗口标题
root.title("我的应用程序")
root.mainloop()完整标题功能解析import tkinter as tk
import time
from tkinte
注意：此时WiFi模块的驱动已经修改好。RTL8188 USB WIFI 联网测试（记录操作步骤）首先使能驱动，在根目录/lib/modules/4.1.15里面。首先命令 lsmod 可以看到有没有驱动。然后命令 modprobe 8188eu.ko 使能RTL8188 USB WIFI的驱动。然后我们 ifconfig -a 就可以看到有个 wlan0 网卡了。为了连接上W
转载
2023-07-25 20:10:41
846阅读
4G网卡驱动调试分三步走：一、基本概念USB 部分的功能接口 APN二、驱动移植USB Driver GobiNet Driver 或者 QMI WWAN PPP 拨号配置三、RIL 移植RIL Driver Integration 抓取 Android Log RIL 移植吃颗定心丸：4G 模块都是 MiniPCIE 接口的，包括很多 4G 模块都是 MiniPCIE 接口的。但是研究一下就会发
转载
2023-10-08 19:51:10
1049阅读
树莓派初始化物理配置这里需要先正常插入一张能够上网的4G卡在模块内。软件环境下载示例程序，解压后，把其内部Raspberry文件夹下的c文件夹改名为SIM7600X，然后把SIM7600X整个文件夹复制到树莓派/home/pi目录下进入/home/pi/SIM7600X目录下，执行指令chmod 777 sim7600_4G_hat_init设置开机初始化脚本sudo nano /etc/rc.l
转载
2023-11-04 08:27:52
381阅读
4G通信模块把频率接收器和信号增幅器等部件全都整合在一起，实现了一体化。随着工业发展，嵌入式设备接入网络的需求日益增多，在没有有线或WiFi等无线的环境下，直接通过4G通讯模块连接运营商网络来接入互联网不失为一个好方法。因此，本文就为读者介绍一下基于ARM平台的嵌入式设备在Linux下使用4G模块的方法。一、开发环境1) 开发主机环境：Ubuntu12.04（64位）、ar
转载
2023-11-21 22:24:22
263阅读
1.主要是编写了公共模块以及认证服务模块的代码；首先公共模块中，jsonUtil解析数据并返回对象以及序列化一个对象返回json字符
原创
2022-10-21 10:13:41
58阅读
Merton模型的参数校准与定价代码基于python平台实现，全部代码获取地址如下： 前言1973 年，美国的数学家、经济学家 Black 和Scholes提出了一个较为完整的期权定价模型，称为 Balck-Scholes 模型。Balck-Scholes 模型是较为理想的欧式期权定价模型，模型的提出为期权的发展奠定了基础，在理论和实践方面都有着重大的意义。由于 Balck-Scholes 模型的
转载
2024-01-08 14:23:24
0阅读
一、４G相关知识4G是第四代通讯技术。能够传输高质量视频图像。4G的下载速度达100Mbps，比目前的拨号上网快2000倍，上传的速度也能达到20Mbps，并能够满足几乎所有用户对于无线服务的要求。此外，4G可以在DSL和有线电视调制解调器没有覆盖的地方部署，然后再扩展到整个地区。4G的联网通路４Ｇ终端直接通过和基站连接，基站通过电缆和运营商的机房连接，机房连接到核心网，核心网最后连接到互联网。示
转载
2023-08-01 15:30:49
2476阅读
一、前言Beautiful Soup 是一个可以从HTML或XML文件中提取数据的Python库.它能够通过你喜欢的转换器实现惯用的文档导航,查找,修改文档的方式.Beautiful Soup会帮你节省数小时甚至数天的工作时间.Beautiful Soup支持Python标准库中的HTML解析器,还支持一些第三方的解析器,其中一个是 lxml ，在使用Beautiful Soup进行代码解析的时候
转载
2024-01-14 14:32:39
55阅读
