贺磊 关注
- 375W+
- 人气
- 715
- 评论
- 918
- 点赞
使用 gravity 做大表的分表操作
又到了招聘季了,前两天遇到一个面试的小伙伴,他说面试官和他聊得很投机,无意中谈到了DNS请求的过程。他一时语塞随便应付了两句,虽然对方没有追问的意思,但最后面试结果也并不理想。本着边面试边学习的态度,我们来看看DNS请求的过程中涉及到的定义和原理。
唐宇迪:51CTO微职位讲师,计算机博士,人工智能专家:介绍人工智能学习步骤和知识框架。人工智能的学习可以拆分为7步,此为1-3步上篇。
阅读
评论
收藏
随着企业对云资源使用的越来越广泛,很多企业的关注点已经不单单满足于简单的使用云,而是更关注如何把运用的更好。对于如何把云用的更好,其实我们有很多个方面可以考量,比如系统的监控,比如成本的管控等等。因此对云资源使用的合理性,成为企业越来越关注的一个重点。那么接下来我们就一起来看一下如何使用Log Analytics监视Azure VM的创建和删除,从而帮助资源的使用者来了解云上最近新增/减少了什么资源。
阅读
评论
收藏
部署ELK日志分析系统完整流程,理论请看上一篇
阅读
评论
收藏
上一篇中提到了使用gravity做分表,https://blog.51cto.com/lee90/2482189 另外还有个工具也比较好用,就是爱可生公司出品的 DTLE https://github.com/actiontech/dtle关于这2个工具的差异,大家可以自行参考官方文档比对下,各有千秋吧。个人这2个工具都测试过:1、gravity支持的数据源更多,DTLE只支持MySQL,但是支持
阅读
评论
收藏
kubernetes的pv/pvc存储标签(空格分隔):kubernetes系列一:kubernetes的PV/PVC存储一:kubernetes的PV/PVC存储1.1pvPersistentVolume(PV)是由管理员设置的存储,它是群集的一部分。就像节点是集群中的资源一样,PV也是集群中的资源。PV是Volume之类的卷插件,但具有独立于使用PV的Pod的生命周期。此API对象包含存储实现
阅读
评论
收藏
帮你入门解读朴素贝叶斯算法
阅读
评论
收藏
本文研究如何使用RT_Thread onenet组件将设备连接到中移onnet云平台,onenet组件提供多种方式连接云平台,本文使用mqtt方式连接,完成一个三色灯项目。
阅读
评论
收藏
Nginx 以其高性能,稳定性,丰富的功能,简单的配置和低资源消耗而闻名。本文从底层原理分析 Nginx 为什么这么快!Nginx 的进程模型Nginx 服务器,正常运行过程中:多进程:一个 Master 进程、多个 Worker 进程。Master 进程:管理 Worker 进程。对外接口:接收外部的操作(信号);对内转发:根据外部的操作的不同,通过信号管理 Worker;监控:监控 Worke
阅读
评论
收藏
kubernetes持久化存储,静态存储【pv】,动态存储【StorageClass】(5)
阅读
评论
收藏
Pipeline翻译过来就是流水线的意思,在公司中可能会有很多项目,如果使用Jenkins构建完成后,开发构建项目需要一项一项点击,比较麻烦,因此,pipeline就应用而生了。一、部署Pipeline——代码流水线管理Jenkins部署及其他服务部署可参考博文:持续集成之代码质量管理———Sonar另外我们再开一台测试端1、Jenkins服务器操作如下(配置免密登录及对Jenkins的用户配置授
阅读
评论
收藏
主流高并发架构
故障表现Web管理后台发现告警,如下图所示:Pve40这个节点的某个盘down掉了。问题排查ssh登录pve40这个机器所在的系统,执行df–h查看磁盘挂接情况,得到如下输出:通过挂接点名称(ceph-13)与故障osd的id相对照,可以准确无误的判断出物理磁盘/dev/sdc出现了故障。修复尝试在告知其它人发生故障以后,并确认故障处理不会导致任何负面作用的情况下,先试着从web管理界面选取故障o
阅读
评论
收藏
KVM迁移静态迁移(冷迁移)对于静态迁移,你可以在宿主机上保存一个完成的客户机镜像快照,然后在宿主机中关闭或者暂停该客户机,然后将客户机的镜像文件复制到另一台宿主机中,使用在源主机中启动该客户机时的命令来启动复制过来的镜像。动态迁移(热迁移)如果宿主机和目的宿主机共享存储系统,则只需要通过网络发送客户机的vCPU执行状态,内存中的内容,虚机设备的状态到目的主机上。共享存系统指的时源和目的虚机的镜像
阅读
评论
收藏
DevOPS文化的兴起,一方面是实践打破运维与研发的堡垒之墙,另一方面也是敏捷开发过程中的必要产物。
阅读
评论
收藏
接上一篇《KubeSphere实战排除》近期在使用kubesphere中也记录了一些使用问题,希望可以对其他人有帮助八kubesphere应用上传问题8.1文件上传413将应用部署进入kubesphere中,应用中有设置上传文件功能,测试上次异常无法正常上传,文件上传,ingress413报错,kubesphere使用的是ingress-nginx控制器,可以在其中注解添加k-v来支持,解决方案:
阅读
评论
收藏
监控的重要性不言而喻,但是如果缺少了告警,那么监控的效果将会大打折扣。本文一步一步展示了如何安装Prometheus、创建和配置自定义告警规则,集成Alertmanager以及接收告警通知的邮件账户。
阅读
评论
收藏
kubernetes的volume配置标签(空格分隔):kubernetes系列一:kuberentes的volume配置一:kuberentes的volume配置1.1背景说明:容器磁盘上的文件的生命周期是短暂的,这就使得在容器中运行重要应用时会出现一些问题。首先,当容器崩溃时,kubelet会重启它,但是容器中的文件将丢失——容器以干净的状态(镜像最初的状态)重新启动。其次,在Pod中同时运行
阅读
评论
收藏
本节,我们开始学习wemos D1的HTTP Client编程,并实现通过HTTP GET方式获取天气信息的功能。
阅读
评论
收藏
最近我们的集群状态异常,发现启动zk的时候一直失败,看了日志是真的心酸,5s挂机,这要是在开黑,分分钟被举报了,一开始真的没想懂启动zk为什么这么难,而且很稳定的在5s左右失败,通过时间可以判断这个进程还没有完全启动,在这个时间段内,顶多就是在init状态[root@ZYC3-AQGK-LJCL-SRV05deployer]#systemctlstatuszookeeper●zookeeper.s
阅读
评论
收藏
问题起因:一开始CentOS8默认的yum源是能够正常使用的,但使用如下命令安装了DevelopmentTools之后:yumgroupinstall-y"DevelopmentTools"不知道为啥就开始出现同步仓库缓存失败的问题,无法正常安装一些工具包。错误提示如下:[root@localhost/etc/yum.repos.d]#yummakecacheCentOS-8.0-AppStrea
阅读
评论
收藏
Redis数据库操作、持久化详解及内存管理基础概览
阅读
评论
收藏
由于 hystrix 对流量的监控状态的监控是单应用的。有的时候我们需要全面查看整个系统的监控状态,那么我们可能需要引入turbine 的监控检查。在spring boot admin 已经有spring-boot-admin-server-ui-turbine 这个插件 turbine 是一个hystrix 的集合。里面展示所有的hystrix的效果。我们这里用的spring cloud
阅读
评论
收藏
传统银行构建智能风控存在哪些困境呢?相对互联网金融公司而言,传统银行普遍存在以下八大痛点,这就使得传统银行对于市场需求的反应较为滞后,主要体现在容易错过创新型产品的最佳推广期、在金融科技转型方面的略显被动、在技术市场缺乏话语权等方面。
阅读
评论
收藏
大数据时代的到来,数据成为企业最重要的资产之一,数据加密的也是保护数据资产的重要手段。本文主要在结合学习通过MySQL函数及Python加密方法来演示数据加密的一些简单方式。准备工作为了便于后面对比,将各种方式的数据集存放在不同的表中。创建原始明文数据表1/创建原始数据表/23CREATETABLEf_user(4idint(11)NOTNULLAUTO_INCREMENT,5namevarcha
阅读
评论
收藏
Hash<K,V> 泛型类实现以及 get(K key) 和 put(K key,V value) 的具体过程
阅读
评论
收藏
1,MHA概述MHA目前在mysql高可用方面是一个相对成熟的解决方案,它由日本DeNA公司youshimaton(现就职于Facebook公司)开发,是一套优秀的作为mysql高可用性环境下故障切换和主从提升的高可用软件。在mysql故障切换过程中,MHA能做到在0-30秒之内自动完成数据库的故障切换操作,并且在进行故障切换操作的过程中,MHA能在最大程度上保证数据的一致性,以达到真正意义上的高
阅读
评论
收藏
kubernetes生产环境高可用部署
阅读
评论
收藏
这里的数据流指数据从前端流向后端的过程中途径的所有组件或者说服务,比如用户的http请求先到Nginx,再到后端服务1,再到发现服务,再到缓存服务,再到后端服务2,然后是数据库,以及其他调用,总的来说就是一个请求进入的路径,如果将这样的一个过程可视化出来,我想是不错的,而这样的一个可视化也就可以做成一个监控的可视化,监控测试的连接是否可以完成的完成相应以及发现那个组件出现了问题。而这里的前端后端并
K8S on LinuxONE
阅读
评论
收藏