location.href 返回完整的urllocation.origin 返回带协议的主机域名 如http://www.test.comlocation.pathname 返回url中路径部分 location.search 返回url中的参数
转载
2023-06-08 09:46:13
417阅读
在日常使用Python做爬虫，一般会用到以下手段：请求URL，返回HTML文本，然后通过xpath、css或者re，提取数据有些网页的数据通过AJAX异步请求加载，此时找到对应的接口，调用并直接使用接口返回的数据有时候如果网站反爬或安全机制比较高时，则会做一些验证或者加密，比如cookie内必须携带token等信息，而这些信息是通过混淆过的js代码计算得出的。针对1，应该是爬取大多数没有任何安全机
转载
2023-08-07 21:27:19
2阅读
数据库连接池为什么使用数据库连接池？线程池：
1.初始化一些线程，提供给程序使用
2.节约了资源，关闭线程的开关资源，节约了内存空间
3.例如初始化五个线程对象，这里有10个线程目标
首先执行五个线程目标，其他五个等待；
当这五个执行完毕时，会执行其他线程，不会关闭线程。
数据库连接池：
现在的代码每执行一次业务都需要申请新的数据库
# Android网页无法加载JS的解决方案
在开发Android应用时，嵌入网页是一项常见需求。我们可能会使用`WebView`来加载网页内容，但有时候我们会遇到网页无法加载JavaScript的情况。这篇文章将深入探讨这个问题，包括原因、解决方案以及代码示例，帮助你解决这一常见问题。
## 1. 问题背景
在Android中，`WebView`是用于显示网页内容的主要工具。通过设置`We
大家都知道浏览器加载外部文件（css和js），都是呈阻碍式加载，试想如果外部引入文件过多，外加程序js执行时间和http请求/相应的延迟，会使页面的空白时间加长，影响用户体验。有的人可以说，可以把页面所需的css文件放入＜head/＞标签中，ｊｓ文件放入＜body/＞内尾部，这样可以在页面部分显示后再加载和执行js文件，提高用户体验，确实这是一种有效的解决方案。 随之而来，将js文件放入尾部，
转载
2023-12-03 07:24:40
72阅读
需求： 在使用webview加载H5界面时，注入一个本地js文件（该js文件的作用是采集H5页面中用户的点击事件）。也就是在webview打开了一个H5页面的时候动态的注入一个js，让该js和页面并行执行各自的逻辑。思路： 查阅了一下网上的资料，思路也就两种，这里先列出来，后面再对这两种思路做评判，如下所示：（1）第一种思路：
转载
2023-08-16 14:56:17
483阅读
[mw_shl_code=java,true]WebView是一个可以显示网页的控件。需求：通过WebView加载assets下的html文件。实现页面的缩放。向menu键添加：前进、后退和刷新，实现对网页的操作点击网页中的链接，仍然使用本WebView浏览器，而非调用系统的浏览器网页中有butto
原创
2021-12-16 15:17:53
296阅读
# 如何处理 iOS 网页视频加载失败
作为一名刚入行的开发者，你可能会遇到视频加载失败的问题，尤其是在 iOS 设备上。本文将指导你如何处理这一问题，我们将提供一个清晰的流程，逐步讲解每一步需要的代码，以确保你能够顺利实现视频播放的功能。
## 流程步骤表
以下是解决 iOS 网页视频加载失败的基本流程：
| 步骤编号 | 步骤描述 | 具体操作
PySpider没有用过框架写爬虫，有人推荐了pyspider，我也没有和别的框架比对，就直接上手先用了。使用感受框架的封装性带来的优缺点在这里显示的淋漓精致...优点爬虫该有的都有了——网站入口；分页查询；解析网页；保存数据(还可以发消息)；爬取时间间隔设置；网页有效期维护；爬取多线程设置；对无头浏览器phantomjs的支持；支持web ui上调试代码，需求不高的情况下类似在线编写代码；提供了
本篇依旧来自
个人只是做了一个笔记，方便相关信息的查找，具体可前往源文章。
from selenium import webdriver
browser = webdriver.Chrome()
——个人用的是Chrome，若不想显示界面可以用PhantomJS
对于PhantomJS：browser = webdriver.PhantomJS(executable_path="phanto
转载
2024-07-11 22:59:13
201阅读
Android在进行访问网络或者是请求数据（例如加载列表数据，载入网页等等），需要给用户反馈一个加载的状态，一般会使用一个锁屏的加载弹出框。但是使用弹出框进行加载会有一个不好的体验效果，用户想要退出的加载页面的时候需要按两次返回键才能推出此页面（第一次关闭弹出框，第二次退出当前页面）。所有使用镶嵌在内部的加载可以提供更好的用户体验，使用一次返回就可以退出当前页面，同时自定义布局自定义加载效果。实现
在以往用java来处理解析HTML文档或者片段时，我们通常会采用htmlparser（http://htmlparser.sourceforge.net/）这个开源类库。现在我们有了JSOUP，以后的处理HTML的内容只需要使用JSOUP就已经足够了，JSOUP有更快的更新，更方便的API等。jsoup 是一款 Java 的HTML 解析器，可直接解析某个U
转载
2024-06-30 10:12:20
46阅读
一、页面加载事件主要两种类型：1、window 的load 事件页面载入完成时触发jQuery(window).bind("load",function() {
$("#signinForm").submit(checkForm);
});2、DOMContentLoaded DOM构建完成时触发这个事件，这是图片和样式可能还未完成加载。也就是说这个时间一定会在用户和页面交
转载
2023-10-19 11:38:50
985阅读
一． 加载资源的速度不慢，但是资源多了，就很慢。图片、 css 、 js 、 html 这些资源每个大概需要 10-200ms，一般都是 30ms 就 ok 了。如果一个页面上的资源很多，就很浪费时间。二． &
转载
2023-10-31 11:32:30
292阅读
# 使用Python Requests抓取动态网页
在网络开发中，许多网页在加载时会使用JavaScript动态生成内容，因此我们不能仅仅依靠`requests`库进行请求来获取这些内容。要解决这个问题，我们需要使用一些特定的库和技术来处理动态网页。本文将带你逐步实现这个过程，并介绍如何用Python抓取动态网页。我们将使用`selenium`库来渲染JavaScript并等待网页的完全加载。下
原创
2024-08-29 05:58:35
333阅读
写了两篇之后，我觉得关于爬虫，重点还是分析过程分析些什么呢：1）首先明确自己要爬取的目标 比如这次我们需要爬取的是使用百度搜索之后所有出来的url结果2）分析手动进行的获取目标的过程，以便以程序实现 比如百度，我们先进行输入关键词搜索，然后百度反馈给我们搜索结果页，我们再一个个进行点击查询3）思考程序如何实现，并克服实现中的具体困难 那么我们就先按上面的步骤来，我们首先认识到所搜引擎
# Python爬取JS加载的网页
## 引言
在爬虫的世界中，有一类网页不同于传统的静态网页，它们是通过JavaScript动态加载数据的。这就给我们使用Python进行爬取带来了一定的挑战。本文将介绍如何使用Python爬取JS加载的网页，并给出相应的代码示例。
## 什么是JS加载的网页
JS加载的网页是通过JavaScript脚本动态生成页面内容的。传统的静态网页在服务器端生成好后，直
原创
2023-12-07 12:27:53
221阅读
大家好，我是Python进阶者。 一、前言 前几天在Python钻石
原创
2024-04-15 09:45:35
35阅读
经过上次的两个新闻网页的爬虫实践，积累了一定的经验和技巧后，对后续的网页爬虫也是相对轻松了不少。然后第三个网页我选择了人民网（因为人民网的网页结构相对比较简单）。然后也是附相关代码如下： 由于自己这方面的能力不强，所以就先爬取这三个网页。开始下一步操作：制作网页。 一开始我以为html+js是一个非常简单的操作，只要如下这样的办法就可以轻松做到 所以我觉得这个事情没有那么困难，但是实际操作之后浏览
转载
2023-10-27 06:56:49
43阅读
方式一：window.οnlοad=function(){
var userName="xiaoming"; alert(userName);
} 方式二： $(document).ready(function(){
var userName="xiaoming";
alert(userName);
}); 方式二可简写为： $(function(){
var userName=
转载
2024-08-01 10:26:25
575阅读
