一、背景介绍近期有需求需要抓取微信小程序中的数据分析，与一般的网页爬虫类似，主要目标是获取主要的URL地址进行数据爬取，而问题的关键在于如何获取移动端request请求后https加密的参数。本文从最初的抓包到获取URL、解析参数、数据分析及入库等，一步步进行微信小程序的数据爬取。此次爬取的目标是微信小程序“财神股票”中的已受理科创版公司名单数据，如下：注：抓包、分析、爬取等全过程几乎通用于微信小
转载
2023-06-29 15:15:25
157阅读
引言由于工作需要，给公司前端做了一个小工具，使用python语言，爬取搜狗微信的微信文章，附搜狗微信官方网址很多人学习python，不知道从何学起。 很多人学习python，掌握了基本语法过后，不知道在哪里寻找案例上手。 很多已经做案例的人，却不知道如何去学习更加高深的知识。
转载
2024-08-30 20:32:11
72阅读
网络爬虫作为一种计算机技术就决定了它的中立性，爬虫本身在法律上并不被禁止，但是如果有一些别有用心的人，去使用爬虫做一些违法的事情，那就违法了。爬虫本无罪，有罪的是贪得无厌、险恶的人心。正如水果刀本身在法律生并不被禁止，但你用来杀人，就等着坐牢吧！尽管在过去 20 年间已经做出了诸多相关裁决，不过网络爬虫及其使用时法律所允许的内容仍然处于建设当中。如果被抓取的数据用于个人用途，且在合理使用版权法的情
转载
2023-05-31 09:43:36
255阅读
image1. 场景经常有小伙伴在交流群问我，每天的早报新闻是怎么获取的？image其实，早期使用的方案，是利用爬虫获取到一些新闻网站的标题，然后做了一些简单的数据清洗，最后利用 itchat 发送到指定的社群中。由于爬虫面对 网站改版的不稳定性及 itchat 不安全性，所以放弃了这种方案后期更改了一种方案，通过修改爬虫方案，创建 API 服务，编写 App 去获取数据，然后手动发送到微信群本篇
转载
2023-12-11 11:43:59
71阅读
在python学习之路（10）：爬虫进阶，使用python爬取自己喜欢的小说这篇文章中，我们使用BeautifulSoup爬取了一本小说，这是在学习了BeautifulSoup之后写的第一个小程序，但是感觉自己对BeautifulSoup的用法还不够熟练，所以再来写一个爬虫来增强对BeautifulSoup的用法。这次我们爬取微信公众号的文章标题，文章摘要，文章URL，文章封面图片URL、公众号名
转载
2023-08-05 19:20:33
491阅读
最近比较闲就随便瞎看，看到了防撤回就顺便跟着学着实现一下使用的是wxpy，安装方法pip install wxpy（我使用的是python2.7），这样实现起来比较快，反正也只是练手首现看了两个别人实现的代码，然后看了看wxpy的文档：http://wxpy.readthedocs.io/zh/latest/utils.html（萌新，顺便锻炼下看文档）我实现的代码：import wxpy
i
转载
2023-11-21 15:22:48
2阅读
前言一个需求
需要利用Python+第三方库wxauto 用于微信上自动获取聊天信息，从而根据自己需求对信息自动进行二次处理，
比如自动回复，再比如自动发送文件或者其他。
--- 记录于2022年08月
--- 2023年9月再次测试可用使用Python3的第三方库wxauto, 它适用于Windows的微信客户端官网: http
转载
2023-10-16 17:21:31
368阅读
一、简介前面讲解的功能开发都是简单的调用API 完成的，没有对数据库进行操作。在接下来的高级功能开发中，需要使用到数据库，所以在这一篇中，将对MySQL 数据库的操作做一下简单的介绍，以供读者参考。二、思路分析百度开发者中心提供了强大的云数据库（包括MySQL, MongoDB, Redis），在这一节教程中，我们将对大家比较熟悉的MySQL 数据库进行操作演示，实现微信与数据库的交互
转载
2023-12-27 20:16:48
134阅读
最近通过对微信ipa包解压发现微信有使用WCDB这个开源库，搜索了一下了解到WCDB（WeChat Database）是一个高效、完整、易用的移动数据库框架，基于SQLCipher，支持iOS, macOS和Android。经过分析对比，个人感觉WCDB的优势还是比较突出的。下面我就从几个方面对FMDB，Realm，WCDB，CoreData进行比较分析。由于本人从事iOS开发，对于andro
转载
2023-12-21 11:48:39
443阅读
Python交流微信群：打开学习和分享的大门Python是一种高级编程语言，得益于其灵活性，易学性和强大的社区支持，已经成为许多程序员首选的开发语言。但是，学习Python并没有那么容易，很多人可能会面临困惑和挫折。这时，一个Python交流微信群就能够成为你的建议。在这篇文章中，让我们一起探索为什么Python交流微信群是学习和分享的好地方。什么是Python交流微信群？Python交流微信群是
转载
2023-08-18 22:22:29
165阅读
原标题：经典python学习教程：20行代码打造一个微信群聊助手，解放双手今天的Python学习教程教大家如何用20行Python代码实现微信群聊助手，可以用来活跃群气氛，好多群主创建完群后，拉完一群人，之后就一片寂静，有个群聊助手，就可以帮忙活跃群里气氛，通过今天在自己的微信上有一大批好友的公测，效果还可以。（ps：其实最大胆感受还是，这货比我还会撩妹，撩起妹来一套一套的，晒一波自动撩妹图）对于
转载
2024-02-01 21:36:27
210阅读
在日常的办公过程中，大家会利用微信来发送文件。有时候需要进行大量的文件群发。这样单纯的重复劳动，耗时又无趣。今天，菜鸟哥就为大家带来一个自动化操作微信群发文件的办公神器。让大家分分钟解放双手，效率倍升。01.Pyautogui介绍pyautogui是一款跨平台的自动化操作模块，可以用来操作我们的鼠标和键盘。https://github.com/asweigart/pyautogui对于pyaut
转载
2023-12-12 15:50:19
337阅读
大家都知道，最近代码君迷上了Python，一直在研究这门语言，还是那句话，人生苦短，我学Python，今天代码君要教大家一个黑科技，30行代码实现自己定制的微信群聊助手，这个助手有什么用呐，就是用来活跃气氛的，好多群主创建完群后，拉完一群人，之后就一片寂静，有个群聊助手，就可以帮忙活跃群里气氛，这是代码君在自己群里的测试，效果还可以好了，言归正传，代码君开始教大家如何定制自己的微信群聊助手准备1.
转载
2023-09-04 15:06:25
117阅读
微信是人们沟通的重要方式。几乎每个人都加了很多微信群，有亲友群、同学群、同事群、兴趣群、小区群等。每个微信群里少则几十人，多则四五百人。每个群里都会有很多人发信息，有时候还是语音和视频的信息，所以，无论你什么时候打开微信，最上面的肯定是一排微信群。要解决这个问题，微信需要禁言功能。一、微信群影响了微信的使用体验微信本来是为了促进人们进行更有效的沟通，微信群的初衷也是如此。按照微信的设计，微信群本来
转载
2023-10-06 21:41:03
119阅读
1、前言微信团队已于2017年06月09日正式开源了微信自用的移动端数据库组件 WCDB(WeChat Database)，详见《[资讯] 微信正式开源移动端数据库组件WCDB！》。WCDB是微信终端的第三个开源项目。至此，微信分享出去的代码包括了热更新(即微信Tinker)、网络基础组件(详见《如约而至：微信自用的移动端IM网络层跨平台组件库Mars已正式开源》)和数据库(也就是本文所说的WCD
转载
2023-09-04 15:47:10
447阅读
腾讯TBase是一款腾讯自研高性能HTAP数据库，提供高性能的OLTP和OLAP能力，同时保证可扩展全局一致性分布式事务（ACID），为用户提供高一致性的分布式数据库服务和高性能的数据仓库服务。一方面解决了传统数据库扩展不足、数据sharding之后数据库事务的严格一致性难题、数据安全、跨地域容灾等问题，同时具备了高性能事务处理、数据治理、混合负载支持等能力。在OLTP方面，TBase采用MVCC
转载
2023-07-11 16:07:09
664阅读
说到数据库加密，目前最好且唯一的方案就是SqlCipher对sqlite3整体加密，微信也用的它。开源，且支持很多平台。单就Android来说，集成不算太麻烦，1个jar包，3个so库，1个zip。jar包中基本上重写了android.database.sqlite包中所有的类，全部替换成了net.sqlcipher.sqlite包。why？因为sqlcipher加密后，需要密码才能打开该数据库。
转载
2023-11-08 07:15:29
413阅读
图解说明：微信大量数据存储在本地比如：联系人（包含好友地区、电话、通过那种方式添加）、聊天内容（图片、文字、语音、视频、位置、名片、其他app分享链接）、聊天室、收藏信息、朋友圈内容（包含好友详情、点赞、评论）；摇一摇、附近人、最近联系人、好友请求、图片存放路径；微信内置的表情包；如联系人： 聊天信息 其他表 工具：ES文件浏览器（在各大app市场上
转载
2023-09-14 17:01:28
1483阅读
## 完整指南：如何使用 Python 连接并操作微信云数据库
在这篇文章中，我将引导你实现“Python 微信云数据库”的项目。即使你是刚入行的小白，也能顺利完成这个任务。我们将分步进行，每一步都详细解释，并提供相应的代码示例。
### 整体流程
首先，让我们看看实现的整体流程。以下是实现微信云数据库的主要步骤：
| 步骤 | 描述 |
|------|
在时代快速发展的今天，微信已是我们最常使用的社交软件了，不管是日常生活还是工作需要，我们都与微信密不可分。每次闲来无事翻阅以往与家人、朋友之间的聊天信息，都感觉生活是如此的幸福，但往往由于清理手机内存或是其他原因误删了亲朋好友的微信聊天记录，那时的你是不“好难过”又或是“很烦，一天干啥都没心情”。其实也不必太过沮丧，误删后想要恢复微信聊天记录还是有办法的，让我们一起来学习一下吧。 技巧一
转载
2024-01-09 14:19:24
75阅读
