最近有盆友需要帮忙写个爬虫脚本，爬取雪球网一些上市公司的财务数据。盆友希望可以根据他自己的选择进行自由的抓取，所以简单给一份脚本交给盆友，盆友还需要自己搭建python环境，更需要去熟悉一些参数修改的操作，想来也是太麻烦了。于是，结合之前做过的汇率计算器小工具，我这边决定使用PyQt5给朋友制作一个爬虫小工具，方便他的操作可视化。效果演示：1功能说明可以自由选择证券市场类型：A股、美股和港股可以自
转载
2023-12-11 15:46:32
73阅读
说明：本学习笔记主要参考：Python3网络爬虫开发实战一书 常用的抓包软件有WireShark、Charles、Fildder、mitmproxy、AnyProxy等。原理：通过设置代理的方式将手机处于抓包软件的监听之下，获取APP运行的过程中发生的所有请求及响应，如果请求的URL及参数有规律，用程序模拟爬取即可。如果没有，可以利用mitmdump对接Python脚本直接处理Respo
转载
2023-08-30 10:56:55
213阅读
# Python爬取雪球App数据指南
随着金融科技的快速发展，越来越多的人开始关注股市和投资，而雪球App作为一个知名的投资社交平台，其数据和信息尤为重要。今天，我们将探讨如何使用Python爬取雪球App的数据，帮助大家更好地了解和分析市场。
## 一、准备工作
在开始之前，确保你已经安装了以下Python库：
```bash
pip install requests beautifu
原创
2024-10-27 03:48:55
392阅读
# Python爬取雪球
## 介绍
随着互联网的发展，信息获取变得越来越方便。而在金融投资领域，人们对于股票等金融数据的需求也越来越高。作为一个金融投资者，我们希望能够通过爬取数据来进行分析和决策。在本文中，我们将介绍如何使用Python来爬取雪球网站上的股票数据。
## 雪球网
雪球网是一个提供股票、基金等金融数据的网站，用户可以在上面查看股票的实时行情、财务数据、研究报告等信息。作为
原创
2023-08-20 03:44:22
1258阅读
在这篇博文中，我将与大家分享如何使用 Python 爬取有关雪球组合的一些数据。我们将从版本对比和迁移指南开始，紧接着介绍如何处理兼容性问题，并提供一些实战案例，最后探讨排错指南和性能优化。整个过程循序渐进，希望能带你从头到尾掌握这个技术栈的应用。
## 版本对比与兼容性分析
### 时间轴（版本演进史）
```mermaid
timeline
title 雪球组合爬虫版本演进史
目的由于工作需要，尝试爬取雪球7*24小时信息。需要的数据就是下图红框框起来的部分。运行环境操作系统：windows 10浏览器：ChromePython版本：3.8使用的第三方库：requests、json、time查看数据我们需要知道目标数据是一次性加载全部，还是动态地从某个特定的接口不断的获取数据，所以我们需要先在浏览器上查看一些数据。将页面往下翻一段之后，发现网页内容是动态加载的，往下翻一
转载
2023-09-02 11:30:20
1610阅读
我们先通过百度搜索智联招聘，进入智联招聘官网，一看，傻眼了，需要登录才能查看招聘信息没办法，用账号登录进去，登录后的网页如下：输入职位名称点击搜索，显示如下网页： 把这个URL：https://sou.zhaopin.com/?jl=765&kw=软件测试&kt=3 拷贝下来，退出登录，再在浏览器地址栏输入复制下来的URL 哈哈，居然不用登录，也可
转载
2024-05-17 13:02:42
145阅读
文章目录概要一、爬虫的原理二、分析雪球网的网站三、多页评论爬取五、多只股票爬虫最后 概要这个博客主要实现了雪球网股票评论的爬取，爬取的内容为沪深300股票的评论。一、爬虫的原理这部分就不多提了，一些基础的博客我也整理过爬虫从零开始。python爬虫第N课系列学完前十课就对这篇博客的代码完全清楚明白了，因为用到的技术都是最基本的，没有用到什么scrapy框架或者是多线程爬虫二、分析雪球网的网站网站
转载
2023-10-18 17:29:03
1207阅读
作为的一个完结。暂时先把代码搬上来，注释已经写的很详细了。顺带做一个备份。目前除了调仓记录的获取外其他都已经可以用多进程进行，由于采用了多进程，速度有明显提升。目前测试结果为1500000只组合数据爬取需要200分钟，获取10000只优质组合的净值数据需要不到300分钟。问题仍然在需要登录才能访问的调仓数据获取，由于需要登录，多进程几乎不能起到加速的作用（该sleep的间隔还是要sleep）。后来
转载
2024-01-10 20:33:51
195阅读
保本票据
案例1：A金融机构希望推出期限为1年、每份本金为1000元的保本票据。假定目前金融市场存在两个金融资产，一是当前价格为950元、面值为1000元、一年后到期的无风险零息债券；二是基础资产是1股Z股票、执行价格为5元/股、期限为1年的看涨期权，Z股票的当前价格是4.9元/股，股票波动率为20%，该期权的当前市场报价是0.5元。import numpy as np
import pandas
转载
2023-08-09 18:32:36
106阅读
【国内】 1.腾讯澄清“重锤”传言，消息源头某雪球用户已主动销户昨日，雪球某用户发布的“腾讯将被重锤”一事在业内得到广泛讨论，带动了市场的恐慌情绪，腾讯股价应声下跌逾5%。腾讯集团公关部总经理张军发布微信朋友圈澄清，其为“谣言”。目前发布该消息的用户已清空发言并主动销户，在雪球平台上已无法搜索到。2.国家新闻出版署相关人士回应“停发游戏版号”：申请仍在接收有媒体援引一位游戏公司负责人的信息称，今年
转载
2024-01-26 22:06:39
114阅读
今天是八月2号，自学python爬虫已经一整个月了。不学不理解，真正学了才发现，python不愧是一门博大精深的高级编程语言，我学到现在也才只见识到它冰山一脚，python应用的范围即便相比于c、c++、java等老牌语言也不逞多让；爬虫只是它庞大功能体系的一种，而我一个月来的学习单论爬虫这一块来说也只能说堪堪入门，距离熟练使用再到掌握还有很遥远的路程。 虽然爬虫的路途依旧遥远，但一个月
转载
2024-06-18 15:32:18
270阅读
在这篇文章中，我将记录如何通过 Python 实现对雪球的登录，涉及环境预检、部署架构、安装过程、依赖管理、故障排查和迁移指南等方面。下面我们一起来看看整个过程及其细节。
## 环境预检
在进行雪球登录的实现前，我们需要明确当前的环境需求和兼容性。根据四象限图，评估一下不同的 Python 版本和操作系统兼容性，确保我们的代码在目标环境上能够顺利运行。
```mermaid
quadrant
# Python 获取雪球股价数据
在数据分析和金融科技领域，Python 已经成为一种非常流行的编程语言。尤其是在股票分析和数据可视化方面，Python 拥有丰富的库和资源。今天，我们将一起探讨如何使用 Python 从雪球获取股价数据，绘制甘特图来展示不同股票的价格变化。
## 一、雪球 API 获取股价
雪球财经是一款广受欢迎的股票投资社交平台，提供丰富的股票信息和实时数据。在 Pyt
# 爬虫python 雪球
## 介绍
爬虫是指通过编写程序自动从网页上提取数据的技术，可以用于获取各种网站上的信息。Python是一种简单易学、功能强大的编程语言，非常适合用于编写爬虫程序。本文将介绍如何使用Python编写一个简单的爬虫程序，来获取雪球网站上的股票数据。
## 准备工作
在开始编写爬虫程序之前，我们需要先安装一些必要的库。Python有很多用于爬虫的第三方库，其中比较常
原创
2023-11-22 06:48:51
218阅读
# Python与雪球数据：探索金融数据的奥秘
在金融领域，数据的重要性不言而喻。Python作为一种功能强大的编程语言，已经成为许多金融分析师和数据科学家的首选工具。本文将介绍如何使用Python来获取和分析雪球网的数据，并以甘特图的形式展示项目进度。
## 雪球数据简介
雪球网是一个提供股票、基金、债券等金融产品信息的平台，用户可以在这里获取实时的金融数据和市场动态。通过Python，我
原创
2024-07-26 10:43:04
87阅读
继续更新雪球大战系列，这次更新增加了出拳功能。不过出拳功能一直有问题，害的我改了两个晚上的BUG。最后怎么就跑起来了我也不是非常清楚，不过如果你想要进行任何‘优化’请谨慎。这次主要更新了greg.py并增加了计时器。注意1：这是一个未完成的游戏，基本没有可玩性，仅供参考。注意2：运行之前请确保你安装了pygame包。# greg.py
import pygame
# 还有很多事情要做
clas
苹果发家秘决：滚雪球
苹果公司总是会推出一些小巧、简单，但却经过深思熟虑的产品。他们总是会残忍地减少产品的功能，以期能够得到绝对核心的产品，然后再将这些产品不断地抛光、润色，最后生产出“闪耀”的产品。在一次媒体活动中，苹果公司公布的这一核心产品将会成为下一个大赢家，并解释道，这一核心产品会毫无懈怠地显示它煞费苦心的周密设计，并即将公开销售。 人们可以将目光再次移到苹果公司
转载
2024-08-21 08:04:29
46阅读
室友上半年跟了一个做机器学习方向的导师做股票投资组合的项目，暑假来找我帮忙弄点股票组合的数据来测试算法。目前国内股票资讯网站大约只有雪球能够比较方便地获取大规模的股票组合数据，七月疲于双专生活不能自理，八月断断续续地弄了一阵子，碰了一鼻子灰总算有些摸透了雪球网的套路。这里分享一下我在爬取雪球网数据时遇到的问题，一方面是对自己项目的一个小结，另一方面给其他需要爬取雪球网数据的小伙伴们提供一些参考，也
转载
2023-10-16 21:49:23
100阅读
雪球公司介绍雪球 聪明的投资者都在这里。web 1.0：新闻资讯，股价信息，K线图web 2.0：SNS 订阅，分享，聊天web 3.0：移动 APP，交易闭环雪球现在员工数还不到100，其中技术人员占一半。去年9月C轮融资4kw刀。我们现在的技术栈由下列组件组成：Java，Scala，Akka，Finagle，Nodejs，Docker ，Hadoop。我们当前是租用IDC机房自建私有云，正在往
转载
2024-01-21 01:02:54
33阅读
