WongKyunban的博客_python

annaconda如何切换当前python环境

annaconda默认的python环境是base：把各种项目的依赖都安装到base环境中不是一个好的习惯，比如说我们做爬虫项目和做自动化测试项目等所需要的依赖是不一样的，我们可以将为每个项目创建自己的环境，在各自的环境中安装自己的依赖，这是比较好的做法。

python

开发语言

项目创建

自动化测试

原创 7月前 57 阅读

使用pandas将excel转成json格式

安装好后，pandas会被放在excel的环境里，其他的环境不受影响。在弹出来的选项中选择我们刚刚创建的环境就可以完成配置。python 代码实现。

pandas

excel

json

数据

python

原创精选 7月前 277 阅读

python3创建虚拟环境venv

接下来就可以在当前环境安装依赖了。

python

linux

深度学习

虚拟环境

环境安装

原创 7月前 81 阅读

init.py的作用

在python3.3之前的版本，所有的python包都需要有这样一份文件。因为importlib这个导入系统的核心模块已经可以自动侦测包，不需要。这个文件是空的，但是它也可以用来配置下当前这个python包，如指定包的版本，或者控制可见的符号，当使用。一个文件夹中有这一个文件时，那么这个文件夹就会被视作一个python包。文件的一个重要用途就是表

python

包名

原创 7月前 15 阅读

main.py的作用

这个函数就是python的主函数入口。像C或C++、Java等程序都用一个main函数入口，这样一来这些程序都可以直接在命令行运

python

linux

开发语言

命令行

主函数

原创 7月前 56 阅读

使用anaconda创建notebook工程

题外话，一个IDE最基本的三个主要组成部分：编辑器、集成的编译器、集成的调试器。

python

编译器

调试器

原创 9月前 101 阅读

使用anaconda创建爬虫spyder工程

到此spyder的环境就创建好了，接下来我们来使用这个环境来开发。使用anaconda 创建spyder工程是很方便的。

爬虫

Python

python

运行环境

原创 9月前 130 阅读

股票市场简介

所谓股票市场就是已经发行的股票的转让、买卖、流通的场所，包括交易所市场和场外交易市场两类。中国有上海

python

二级

原创 10月前 64 阅读

什么是Anaconda

在没有使用Anaconda之前，如果你的Python程序想让你的同事运行，那么你的同事可能会遇到很多包依赖问题，但是用了Anaconda

python

Python

数据科学

机器学习

原创 10月前 231 阅读

爬虫小实例——定向爬取及优化输出格式

定向爬取的URL：http://www.zuihaodaxue.cn/zuihaodaxuepaiming2019.htmlimport requestsfrom bs4 import BeautifulSoupimport bs4# 获得爬取的内容 def get_html_text(url): try: r = requests.get(url, time...

定向爬取

html

字符串

主函数

原创 2022-08-24 10:53:03 77 阅读

Python爬虫

requests库：爬取网页robots.txt排除标准Beautiful Soup：解析HTML页面Scrapy专业爬虫框架requestsode)r.encoding = "utf-8"print(r.te...

Python爬虫

html页面

爬虫框架

python爬虫

原创 2022-08-04 10:26:38 107 阅读

使用BeautifulSoup库解析htm、xml文档

BeautifulSoup安装：~/Desktop$ sudo pip install beautifulsoup4测试：from bs4 import BeautifulSoupiBeautifulSoup('<p>data<...

bs4

BeautifulSoup

html

xml

子节点

原创 2022-08-04 10:26:28 155 阅读

HTTP的六个方法

HTTP使用六个方法（Get、Post、Head、Put、Patch、Delete）对URL位置主的资源进行管理。Get：获取URL位

HTTP六个方法

GET

POST

HEAD

html

原创 2022-08-03 10:53:57 119 阅读

使用Requests库进行网页爬取

requests:import requests# 返回一个Response对象r = requests.get("http://www.baidu.com")# 状态码 200 表示成功code = r.st

网页爬取

服务器

代理服务器

chrome

原创 2022-08-03 10:53:48 323 阅读

Traceback (most recent call last): File

在Ubuntu18.04上使用pip命令，突然报出这样一个错误wong@wong:/usr/bin$ pipTraceback (most recent call last): Fileme 'main'解...

pip

ubuntu

vim

原创 2022-08-03 10:53:37 1430 阅读

python使用pandas处理excel数据

使用Python Pandas库读取excel文件（.xlsx, .xls)。使用pandas的 read_excel()方法来读取excel数据，可以读取第一

python

excel

数据分析

大数据

数据

原创 2022-08-03 10:38:39 1047 阅读

正则表达式Re库介绍

Re库是python的标准库，Re库采用raw string（原生字符串类型）表示正则表达式，如 r’[1-9]\d{5}’。调用方法：import re使

Re

正则表达式

字符串

操作符

原创 2022-08-03 10:10:59 71 阅读

玩爬虫，怎能不了解一下正则表达式

正则表达式的常用操作符操作符说明实例.表示任何单个字符[]字符集，对单个字符给出取值范围[abc]表示a、b、c，[a-z]表示a到z

正则表达式

python

字符串

操作符

原创 2022-08-03 10:10:49 55 阅读

python信息标记与信息提取

对信息进行标记后，可以增加信息的维度，形成信息的组织结构。可用于通信、程序等方面。国际公认的信息标记有三种：XMLYAML：通过无类型的...

信息标记

信息提取

搜索

字符串

json

原创 2022-08-03 10:10:26 156 阅读

使用requests库爬取网络图片、视频、音乐并存储

使用网络爬虫获取网络图片并存储import requestsimport osimport uuiddef download_and_store_image(url): try: path = root + str(u...

reuqests

爬虫

音乐

视频

图片

原创 2022-08-03 10:10:20 69 阅读

Robots协议

Robots协议在网站根目录下的放置一个robots.txt，指明哪些目录可以访问，那些不可以访问，如：User-agent: * Disa

robots

ide

根目录

html

原创 2022-08-03 10:10:10 49 阅读

网络爬虫根据尺寸分类

目标规模特点技术要求爬取网页玩转网页小规模数量小，爬取速度不敏感使用Requests库就可以满足需求爬取网站爬取系列网站中规模

robots

服务器

搜索引擎

百度

原创 2022-08-03 10:09:58 41 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

11060617

annaconda如何切换当前python环境

使用pandas将excel转成json格式

python3创建虚拟环境venv

init.py的作用

main.py的作用

使用anaconda创建notebook工程

使用anaconda创建爬虫spyder工程

股票市场简介

什么是Anaconda

爬虫小实例——定向爬取及优化输出格式

Python爬虫

使用BeautifulSoup库解析htm、xml文档

HTTP的六个方法

使用Requests库进行网页爬取

Traceback (most recent call last): File

python使用pandas处理excel数据

正则表达式Re库介绍

玩爬虫，怎能不了解一下正则表达式

python信息标记与信息提取

使用requests库爬取网络图片、视频、音乐并存储

Robots协议

网络爬虫根据尺寸分类