Linux 服务器配置使用代理 IP 的selenium 爬虫 在 Linux 服务器运行爬虫有时可以取得奇效,但在 Linux 服务器环境(即无图形化界面)下配置爬虫环境、代理 IP 与常见的 Windows 环境有着较大区别。本文为对在 Linux 服务器上配置 selenium 及 Google Chrome 环境并基于代理 IP 运行爬虫的经历记录,针对一些笔者遇到的坑提供了解决方案,供读
系统和EPEL源的中nignx版本较旧,可以安装官方源的最新版本 官方包链接:http://nginx.org/en/linux_packages.html官方 yum 源链接http://nginx.org/en/linux_packages.html#RHEL-CentOS范例: 通过官方 yum 源安装nginx[root@centos8 ~]# cat /etc/yum.repos.d/n
闲话少说,一共两步,升级内核+安装docker,下面开始:一.升级内核运行docker, Linux内核版本需要在3.8以上,针对centos6.5 内核为2.6的系统需要先升级内核.不然会很卡 查看版本命令:uname -a 查看系统命令:more /etc/issue 如上:需要升级升级内核步骤:1.导入public key(公钥数字证书)执行命令:rpm --import
在 Linux 内核中发现了一个名为 “Stack Clash” 的严重安全问题,攻击者能够利用它来破坏内存数据并执行任意代码。攻击者可以利用这个及另一个漏洞来执行任意代码并获得管理帐户(root)权限。在 Linux 中该如何解决这个问题?the-stack-clash-on-linux-openbsd-netbsd-freebsd-solarisQualys 研究实验室在 GNU C Libr
Centos7.5 ----- docker ------- splash               第一步:服务器环境的配置            &nbs
作者:声东大家好,今天跟大家分享一个Linux core dump分析的案例。问题症状问题的症状很简单,就是服务器不定期重启。客户使用的产品是CentOS云服务器。详细分析首先,用crash命令打开客户提供的core dump,能看到一些内核版本,vCPU数量,core dump产生的时间,开机时间等最基本的系统信息。这些信息中,和目前这个问题直接相关的是PANIC这一行。首先,用crash命令打
一,临时方式1,用命令修改路由(重启后失效)ip route add 192.168.30.0/24 via 192.168.30.254 dev enp1s0f0 ip route add 10.100.5.0/24 via 192.168.30.254 dev enp1s0f0 ip route add 10.100.6.0/24 via 192.168.30.254 dev enp1s0f0
# 下载不存在的资源的方法使用迅雷云盘,添加下载任务到云盘,有一定的概率下载到已经被删除的资源。比如下载HDP相关的资源:<http://mirrors.huaweicloud.com/kunpeng/yum/el/7/bigdata/HDP-GPL/3.x/updates/3.1.0.0/HDP-GPL-3.1.0.0-centos7-gpl.tar.gz><http://mi
前言 本人要在linux下载一个2.5G的文件,但只有20kb/s,实在忍受不了,最终利用工具实现了800kb/s的速度,除了利用工具的方法,本人都尝试了,但是几乎没有效果,我也会罗列出来,可自行尝试 方法一:clash(本人已实践)提示:以下是以clash(自行百度)上网工具为例`1.设置clash 如果想获取此工具(htts://xn--4gq62f52gdss.com/#/regi
APIAPI(Application Programming Interface) 应用程序编程接口         是一些在Java中已经编写好的类,提供一些已经写好的方法,开发者可以直接调用这些方法而无须知道方法的底层实现过程,提高开发的效率。 Object类       在
转载 7月前
41阅读
安装Docker 以及Splash渲染引擎11.1 Splash 渲染引擎安装 docker安装 Splash替换默认docker machine的存储位置 11.1 Splash 渲染引擎 Splash是Scrapy官方推荐的JavaScript渲染,它是使用WebKit开发的轻量级无界面浏览器,提供基于HTTP接口的JavaScript渲染服务,支持以下功能:为用户返回经过渲染的HTML页面
转载 2月前
1704阅读
零、前言部落冲突(Clash of Clans)是手机上一个很不错的联机对战游戏,安卓和iOS平台上都有。最近玩这个略上瘾,前几天看到部落里有人说用模拟器可以在电脑上玩,就想自己试试。  一、第一次尝试部落里的哥们推荐的是bluestacks,一个很不错的安卓模拟器,Mac OS和Windows平台都支持。由于我用的是Mac,必须下Mac OS版。很不幸的是,直接打开blues
对于linux主机,如果没有足够的内存来执行其他任务,会抛出OOM,随后系统会开始杀死进程以释放内存,凡是运行在宿主机的进程都有可能被kill,包括docker及其他程序,如果重要的进程被kill,与他相关的服务都会down。在抛出了OOM的时候,系统会为每个进程计算出一个分数,分数高的进程会优先被kill掉,计算分数有一下3个指标:        /pro
Abstract. Clash detection is used for the model collision check. The paper introduce the clash detection in PDMS, and also about how to set the piping component for the operation space clash check. Ke
转载 2021-08-17 14:07:44
997阅读
1:异常(理解)(1)程序出现的不正常的情况。(2)异常的体系Throwable|--Error严重问题,我们不处理。例如内存溢出 |--Exception |--RuntimeException运行期异常,我们需要修正代码 |--非RuntimeException 编译期异常,必须处理的,否则程序编译不通过(3)异常的处理:A:JVM的默认处理把异常的名称,原因,位置等信息输出在控制台,但是呢
转载 27天前
171阅读
title: iOS Crashcategories: iOS优化Understanding and Analyzing Application Crash Reports稳定性APP 稳定性方面主要是减少异常及崩溃,针对这部分,可以从 Category、Method Swizzling 以及静态分析来入手。1.1 Category 分析Category可以为现有的类添加方法,但是Category
使用vue开发过一段时间了,采用 Vue-cli脚手架中出现一些页面空白问题的解决方法总汇1.npm run build打包页面空白我们会发现页面head中引用的js和css文件是出现了路径错误,这里修改如下:解决位置:config/index.js文件:把assetsPublicPath: '/'改为assetsPublicPath: './'build: { assetsPublicP
转载 5月前
1095阅读
简单记录一下自己的工作吧,有些乱,希望大家能看懂今天发现vscode无法远程连接了,我刚刚才弄好,一个很恶心的小问题:vscode自动更新到了1.86版本,我们的ubuntu18.04,属于旧的版本,要想远程连接,windows上的vscode必须是1.85及以下。 如何知道自己的vscode是什么版本,通过问GPT,知道在这个位置另外,我是怎么知道是vscode版本问题导致的呢?因为我vscod
Docker——Docker介绍Docker——Docker运行底层原理和为什么Docker比Vm快Docker——Docker命令——工作最常用Docker——镜像原理Docker——容器数据卷Docker——DockerFile默认大家都已经在虚拟机上(centos)安装好了docker,然后接下来我们来讲解如何在docker上安装redis,mysql 如果没安装好docker如下文章有讲如
前言之前老顾介绍了Sentinel相关的业务介绍,小伙伴们用的怎么样呢?今天老顾来介绍另一个话题,就是Sentinel一旦重启,配置规则就会消失。那肯定是不能够用在生产环境的,我们需要把规则持久化,老顾来介绍一下nacos里面。动态限流规则Sentinel 动态规则扩展Sentinel 的理念是开发者只需要关注资源的定义,当资源定义成功后可以动态增加各种流控降级规则。Sentinel 提供两种方式
  • 1
  • 2
  • 3
  • 4
  • 5