爬取经纬度的流程
以下是一份爬取经纬度的流程表格：
| 步骤 | 动作 |
|---|---|
| 1. 获取地址列表 | 从文件或数据库中获取待爬取的地址列表 |
| 2. 发送请求并获取页面内容 | 使用Python的requests库发送HTTP请求，获取页面的HTML内容 |
| 3. 解析页面内容 | 使用解析库（如BeautifulSoup）解析页面内容，提取需要的信息 |
| 4. 处理数据 | 对获取到的数据进行处理，如过滤、整理、保存等操作 |
| 5. 爬取下一个地址 | 重复步骤2~4，直到所有地址都被爬取完毕 |
| 6. 结束 | 爬取结束，输出结果或保存到数据库中 |
下面是每个步骤需要做的操作及代码示例：
步骤1：获取地址列表
首先，你需要从文件或数据库中获取待爬取的地址列表。假设我们的地址存储在一个文本文件中，每行一个地址。我们可以使用Python的open()函数打开文件，通过readlines()方法读取所有行，并使用strip()方法去除每行末尾的换行符。
# 打开文件
file = open('address.txt', 'r')
# 读取所有行
lines = file.readlines()
# 去除每行末尾的换行符
addresses = [line.strip() for line in lines]
# 关闭文件
file.close()
步骤2：发送请求并获取页面内容
接下来，我们使用Python的requests库发送HTTP请求，并获取页面的HTML内容。通过调用requests库的get()方法，传入地址参数，即可发送GET请求并获得响应。
import requests
# 循环遍历每个地址
for address in addresses:
# 发送GET请求并获取响应
response = requests.get(address)
# 获取页面内容
html = response.text
步骤3：解析页面内容
在这一步中，我们使用解析库（如BeautifulSoup）解析页面内容，提取需要的信息。使用BeautifulSoup的find()或find_all()方法，通过标签名或CSS选择器等方式定位元素，并提取其文本内容或属性值。
from bs4 import BeautifulSoup
# 创建BeautifulSoup对象
soup = BeautifulSoup(html, 'html.parser')
# 定位需要的元素
element = soup.find('div', class_='location')
# 提取文本内容或属性值
latitude = element['data-latitude']
longitude = element['data-longitude']
步骤4：处理数据
在本步骤中，你可以对获取到的数据进行处理，如过滤、整理、保存等操作。在这个示例中，我们将经纬度保存到一个列表中。
# 创建一个结果列表
results = []
# 循环遍历每个地址
for address in addresses:
# 发送GET请求并获取响应
response = requests.get(address)
# 获取页面内容
html = response.text
# 创建BeautifulSoup对象
soup = BeautifulSoup(html, 'html.parser')
# 定位需要的元素
element = soup.find('div', class_='location')
# 提取文本内容或属性值
latitude = element['data-latitude']
longitude = element['data-longitude']
# 添加到结果列表中
results.append((address, latitude, longitude))
步骤5：爬取下一个地址
在这一步中，我们重复步骤2~4，直到所有地址都被爬取完毕。可以使用for循环遍历地址列表，并在循环中执行步骤2~4的操作。
# 创建一个结果列表
results = []
# 循环遍历每个地址
for address in addresses:
# 发送GET请求并获取响应
response = requests.get(address)
# 获取页面内容
html = response.text
# 创建BeautifulSoup对象
soup = BeautifulSoup(html, 'html.parser')
# 定位需要的元素
element = soup.find('div', class_='location')
# 提取文本内容或属性值
latitude = element['data-latitude']
longitude = element['data-longitude']
# 添加到结果列表中
results.append
