主要目标是：
· 从如何评价X的话题下开始抓取问题，然后开始爬相关问题再循环
· 对于每个问题抓取标题，关注人数，回答数等数据
1 创建项目
$ scrapy startproject zhihu
New Scrapy project 'zhihu', using template directory'/Library/Frameworks/Python.f
转载
2021-08-17 00:50:12
628阅读
基于Scrapy爬知乎用户的信息只是偶尔在逛知乎的时候看到了有这样一个教学，
原创
2023-06-09 18:44:46
112阅读
从今天开始更新关于爬取知乎的一系列文章，知乎的更新很快，网上现在好多关于知乎的登录代码已经不管用了，所以我就发出来大家都看看
原创
2021-07-21 10:08:35
474阅读
下面我们看看用scrapy模拟登录的基本写法： 注意：我们经常调试代码的时候基本都用chrome浏览器，但是我就因为用了谷歌浏览器（它总是登录的时候不提示我用验证码，误导我以为登录时不需要验证码，其实登录时候必须要验证码的），这里你可以多试试几个浏览器，一定要找个提示你输入验证码的浏览器调试。 1、
原创
2021-05-14 20:14:54
595阅读
# MySQL 简介与应用
## 什么是 MySQL？
MySQL 是一个开源的关系型数据库管理系统（RDBMS），是最流行的数据库之一。它采用结构化查询语言（SQL）进行数据管理和操作，广泛应用于各种场景，从小型网站到大型企业级应用。
## MySQL 的基本概念
1. **数据库（Database）**：数据库是存储数据的集合，通常由多张表格组成。
2. **表（Table）**：表是
在windows还是在linux上，如果我们直接使用pip安装Scrapy，会报错，这是因为scrapy依赖twisted，而twisted需要c++的一个文件，在Windows环境下，那么需要下载.whl文件。直接安装scrapy1、安装Twisted1.1 进入到 https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted ，下载 Twisted‑1
转载
2023-08-23 12:42:43
373阅读
# MySQL DRBD技术在数据库高可用性中的应用
## 引言
随着大数据和云计算时代的到来，数据的安全和高可用性变得越来越重要。作为一个重要的数据库管理系统，MySQL扮演着关键的角色。在MySQL中，数据的高可用性是保证系统正常运行的关键因素之一。在这方面，DRBD（Distributed Replicated Block Device）技术为我们提供了一种解决方案。本文将介绍MySQL
原创
2023-08-14 07:46:27
67阅读
# 实现 “TiDB + MySQL + 知乎” 项目指南
在这篇文章中，我将带领你一步一步实现一个简单的项目，利用 TiDB 和 MySQL 的特性来构建一个类似于知乎的问答系统。这是一个很好的练习，可以帮助你理解 TiDB 和 MySQL 的基本操作，同时也能让你熟悉开发流程。
## 项目流程概览
我们将分为几个主要步骤来完成这个项目，如下表所示：
| 步骤 | 描述
一、python简介1、python下载地址：https://www.python.org/downloads/Python的创始人为Guido van Rossum。1989年圣诞节期间，在阿姆斯特丹，Guido为了打发圣诞节的无趣，决心开发一个新的脚本解释程序，做为ABC 语言的一种继承。之所以选中Python（大蟒蛇的意思）作为程序的名字，是因为他是一个叫Monty Python的喜剧团体的
转载
2023-08-06 15:48:42
363阅读
我其实很喜欢造轮子，一直没用过爬虫框架写爬虫。虽然知道爬虫很简单，scrapy框架也不难，但是在舒适区呆久了，真的不想学新东西，用新知识写爬虫。今天我不止用新框架scrapy写爬虫，而且我还要使用sqlite数据库来存储数据，今天算是离开舒适区最远的一次尝试。今天写的是知乎Live的爬虫，用平常的舒适区写法，无非requests、beautifulsoup、csv文件。今天为了用scrapy+sq
原创
2021-01-03 16:38:50
733阅读
MYSQL版本介绍mysql分alpha,beta,rc,GA四个版本。alpha 暗示这是一个以展示新特性为目的的版本，存在比较多的不稳定因素，还会向代码中添加新新特性beta 以后的beta版、发布版或产品发布中，所有API、外部可视结构和SQL命令列均不再更改,不再向代码中添加影响代码稳定性的新特性。rc 是指 Release C
# 理解 TiDB 和 MySQL 的区别
作为一名新手开发者，了解不同的数据库系统及其特性是非常重要的。TiDB 和 MySQL 是常用的数据库管理系统，但是它们在设计理念和使用场景上有很大区别。本文将通过步骤化的方式，帮助你理解这两个数据库之间的区别。
## 步骤流程
下面是了解 TiDB 和 MySQL 区别的基本流程：
| 步骤 | 描述
# MySQL PXC原理知乎
## 概述
在本文中，我将向你介绍MySQL Percona XtraDB Cluster (PXC)的原理。PXC是一个基于Galera Cluster的MySQL多主集群解决方案，可以提供高可用性和性能。
## 流程图
```mermaid
sequenceDiagram
小白->>你: 请求学习"mysql pxc原理 知乎"
你-->>小
原创
2024-06-08 03:51:40
71阅读
这是一篇 Python 入门指南，针对那些没有任何编程经验，从零开始学习 Python 的同学。不管你学习的出发点是兴趣驱动、拓展思维，还是工作需要、想要转行，都可以此文作为一个参考。在这个信息爆炸的时代，以 "Python入门” 为关键字搜索出的结果成千上万。不少小白选手难免会东一榔头西一棒槌，最终看了很多文章，却仍没跨过新手那道门槛。结合自身的学习经验以及与很多自学者的沟通了解，我们整理出一条
转载
2023-07-23 19:05:58
0阅读
前言写个知乎粉丝小爬虫，分为数据爬取和数据的简单可视化两个部分。让我们愉快地开始吧~开发工具Python版本：3.6.4相关模块：scrapy模块；pyecharts==1.5.1模块；wordcloud模块；jieba模块；以及一些python自带的模块。环境搭建安装Python并添加到环境变量，pip安装需要的相关模块即可。数据爬取先随手推一波自己开源的利用requests进行模拟登录的库：h
转载
2021-06-05 15:20:00
364阅读
2评论
# MySQL中的多键(mul)索引详解
在数据库设计中，索引的使用可以大幅提高查询性能。MySQL中有多种类型的索引，而多键索引（mul）是指允许多次重复的索引，可以用于提高某些查询的速度。本文将解释多键索引的概念及其在实际应用中的示例。
## 什么是多键索引
多键索引是指某个字段可以包含重复值的索引类型。在MySQL中，使用`mysql`的`mul`键表示这是一个非唯一索引，可以有效地搜
爬取知乎，配置代理IP
原创
2021-07-21 10:14:10
1964阅读
一、概述read命令接收标准输入（键盘）的输入，或者其他文件描述符的输入。得到输入后，read命令将数据放入一个标准变量中。二、使用举例(这里仅列出一些常用的选项)1.基本读取#!/bin/bash
echo -n "Enter your name:" #参数-n的作用是不换行，echo默认是换行
read name #
转载
2024-09-13 15:22:46
28阅读
# MySQL分页原理知乎
## 一、整件事情的流程
### 步骤表格
| 步骤 | 内容 |
| ------ | ------- |
| 1 | 查询总数据条数 |
| 2 | 计算总页数 |
| 3 | 根据页码查询数据 |
## 二、每一步需要做什么及代码示例
### 步骤1：查询总数据条数
```sql
SELECT COUNT(*) FROM table_name;
```
原创
2024-03-02 06:35:44
16阅读
MySQL的卸载、下载和安装、更改字符编码、以及更改配置文件后无法重启问题PS:若你是第一次安装MySQL，跳过第一步卸载，直接看第二步下载和安装；若你不是第一次安装，一定要卸载干净，避免对后续步骤造成影响！一、卸载1.键盘：win+R ; 输入：regedit，进入注册表编辑器2.查询三个路径里面是否有MySQL目录，有则删掉路径1：\HKEY_LOCAL_MACHINE\SYSTEM\Cont
