马哥教育的博客_python,Mysql,互联网运营,Linux,项目管理,ITIL,马哥教育视频,学员风采,云计算相关(9)

Docker 服务终端 UI 管理工具

这是一个简单的基于终端的UI管理工具，主要适用于对docker和docker-compose容器以及服务的管理和便捷使用，灵感来自于gocui并使用Go语音改写。1.功能特性轻度用户使用尚可，可不要把它当做是一个专业的管理工具，哈哈哈查看docker或docker-compose容器环境的状态一目了然查看container/service的日志查看容器指标的ascii图表，如CPU/内存等自定义这

Docker

置顶转载 2021-05-05 17:54:04 193 阅读

Docker 服务终端 UI 管理工具

这是一个简单的基于终端的UI管理工具，主要适用于对docker和docker-compose容器以及服务的管理和便捷使用，灵感来自于gocui并使用Go语音改写。1.功能特性轻度用户使用尚可，可不要把它当做是一个专业的管理工具，哈哈哈查看docker或docker-compose容器环境的状态一目了然查看container/service的日志查看容器指标的ascii图表，如CPU/内存等自定义这

Docker

置顶转载 2021-05-05 17:53:58 180 阅读

Ceph 架构及性能优化

对分布式存储系统的优化离不开以下几点：硬件层面硬件规划SSD选择BIOS设置软件层面LinuxOSCephConfigurationsPGNumber调整CRUSHMap其他因素硬件层面1、CPUceph-osd进程在运行过程中会消耗CPU资源，所以一般会为每一个ceph-osd进程绑定一个CPU核上。ceph-mon进程并不十分消耗CPU资源，所以不必为ceph-mon进程预留过多的CPU资源。

Linux

置顶转载 2021-05-03 22:07:37 483 阅读

Python的变量、常量

一、什么是变量？变量从字面意思可以理解成：是变化的量。但是这样理解和没有理解貌似没有什么区别，我们把变量两个字拆分看看。我们首先来想想看你是怎么认识我的，今天来你会认识我，明天来你还会认识我。那你是不是记住我这个人的典型特征，比如我的名字Nick、体重140、身高180…世间万物我们是不是都是这样去认识的？毫无疑问是的。既然人能识别世间万物，那么我们之前一直把计算机想象成人，那是不是说计算机也能识

Python

置顶转载 2021-05-02 21:46:53 150 阅读

分布式锁用 Redis 好，还是 ZooKeeper 好？

提到锁大家肯定有了解，像Synchronized、ReentrantLock，在单进程情况下，多个线程访问同一资源，可以用它们来保证线程的安全性。不过目前互联网项目越来越多的项目采用集群部署，也就是分布式情况，这两种锁就有些不够用了。来两张图举例说明下，本地锁的情况下：分布式锁情况下：就其思想来说，就是一种“我全都要”的思想，所有服务都到一个统一的地方来取锁，只有取到锁的才能继续执行下去。说完思想

Linux

置顶转载 2021-05-01 17:33:51 179 阅读

Redis集群工作原理解析

Redis集群工作原理解析Redis缓存因其访问性能高、可靠性更高，作为缓存工具在各大互联网公司中广泛使用。今天我们就来看看RedisCluster的实现原理。集群建立Redis集群是由多个Redis节点组成，每个Redis节点都是相互独立的，为了组建一个redis集群，我们需要使用CLUSTERMEET命令把他们连接起来。节点A通过接收客户端发来的LUSTERMEET命令将另一个节点B加入到集群

Linux

置顶转载 2021-04-29 22:27:51 272 阅读

Go语言并不简单

Go语言并不简单Go不是一种很简单的编程语言。尽管它的许多方面都很简单：语法很简单，大多数语义也很简单。然而，语言不仅仅是语法，我们希望利用它编写出实用的代码。利用Go编写有用的代码并不总是那么容易。事实证明，通过某种方式将一些简单的功能组合在一起，编写出有用的代码可能会非常棘手。在Ruby中，如何删除某个数组中的一项？list.delete_at(i)。如何通过值删除条目？list.delete

Go

置顶翻译 2021-04-28 22:49:38 271 阅读

利用python爬虫爬取网站音乐遇到的坑

前言最近我想在网站上下载几首音乐放到我的u盘里听，但是上网上一找，各大音乐网站下载歌曲（尤其是好听的歌曲）都需要vip。对于像我这样的穷人来说，肯定是不会花几十块钱去下载几首音乐啦，而且作为程序员，充钱去下载音乐那也是不可能的，于是我花了一天时间，上网找了各种资料来学习一下怎样才能不花钱白嫖到网站上的音乐。当然，方法还是有很多种的，最后我还是选择了一种最简单，最方便的一种方法：python爬虫。

Python

置顶转载 2021-04-27 22:25:06 1147 阅读

ElasticSearch查询的性能与评分问题

Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，它天生支持分布式搜索机制，具有搜索、分析、挖掘海量数据的能力，同时还是一个可扩展、近实时的搜索引擎。本文主要分析ElasticSearch分布式搜索的机制，比较不同的搜索类型，并针对ElasticSearch在搜索过程中存在的一些问题进行分析，同时给出优化方案。ES分布式搜索过程中，需要将请求

ElasticSearch

置顶原创 2021-04-25 22:46:06 833 阅读

教你在 Kubernetes 上部署 Redis 高可用集群

Redis介绍Redis代表REmoteDIctionaryServer是一种开源的内存中数据存储，通常用作数据库，缓存或消息代理。它可以存储和操作高级数据类型，例如列表，地图，集合和排序集合。由于Redis接受多种格式的密钥，因此可以在服务器上执行操作，从而减少了客户端的工作量。它仅将磁盘用于持久性，而将数据库完全保存在内存中。Redis是一种流行的数据存储解决方案，并被GitHub，Pinte

Linux

置顶转载 2021-04-24 22:29:40 673 阅读

Linux内存、Swap、Cache、Buffer详细解析

Linux内存、Swap、Cache、Buffer详细解析1.通过free命令看Linux内存total：总内存大小。used：已经使用的内存大小（这里面包含cached和buffers和shared部分）。free：空闲的内存大小。shared：进程间共享内存（一般不会用，可以忽略）。buffers：内存中写完的东西缓存起来，这样快速响应请求，后面数据再定期刷到磁盘上。cached：内存中读完缓

Linux

置顶翻译 2021-04-23 23:33:03 1547 阅读

PyTorch 1.8发布，支持 AMD GPU 和 Python

PyTorch1.8发布，支持AMDGPU和Python近日，PyTorch团队发布了PyTorch1.8版本。该版本整合了自去年10月1.7版本发布以来的3000多次commit，提供了编译、代码优化、科学计算前端API方面的主要更新和新特性。值得一提的是，该版本新增了对AMDROCm的支持。此外，PyTorch1.8版本还为大规模训练pipeline和模型并行化、梯度压缩提供了特性改进。该版本

Python

置顶转载 2021-04-22 21:58:31 443 阅读

Kubernetes 集群网络从懵圈到熟悉

在Kubernetes中要保证容器之间网络互通，网络至关重要。而Kubernetes本身并没有自己实现容器网络，而是通过插件化的方式自由接入进来。在容器网络接入进来需要满足如下基本原则：Pod无论运行在任何节点都可以互相直接通信，而不需要借助NAT地址转换实现。Node与Pod可以互相通信，在不限制的前提下，Pod可以访问任意网络。Pod拥有独立的网络栈，Pod看到自己的地址和外部看见的地址应该是

K8s

置顶转载 2021-04-21 22:24:41 362 阅读

在K8S中部署应用流程

1.创建yaml模板kubectlcreatedeploymentweb--image=nginx--dry-run-oyaml>web.yaml2.修改模板vimweb.yamlapiVersion:apps/v1kind:Deploymentmetadata:labels:app:webname:webspec:replicas:3selector:matchLabels:app:web

K8S

置顶原创 2021-04-20 22:48:15 491 阅读 1收藏

在K8S中部署应用流程

1.创建yaml模板kubectlcreatedeploymentweb--image=nginx--dry-run-oyaml>web.yaml2.修改模板vimweb.yamlapiVersion:apps/v1kind:Deploymentmetadata:labels:app:webname:webspec:replicas:3selector:matchLabels:app:web

K8S

置顶原创 2021-04-20 22:46:19 559 阅读

快速搭建高可用 ETCD 集群

快速搭建高可用ETCD集群本文介绍了etcd集群的工作原理和高可用技术细节。etcd简介coreos开发的分布式服务系统，内部采用raft协议作为一致性算法。作为服务发现系统，有以下的特点：简单：安装配置简单，而且提供了HTTPAPI进行交互，使用也很简单安全：支持SSL证书验证快速：根据官方提供的benchmark数据，单实例支持每秒2k+读操作可靠：采用raft算法，实现分布式系统数据的可用性

Linux

置顶翻译 2021-04-11 20:16:46 2947 阅读

Kubernetes Ingress-Nginx 实现蓝绿、灰度发布

背景介绍某些情况下，我们在使用Kubernetes作为业务应用的云平台，想要实现应用的蓝绿部署用来迭代应用版本，用lstio太重太复杂，而且它本身定位于流控和网格治理；Ingress-Nginx在0.21版本引入了Canary功能，可以为网关入口配置多个版本的应用程序，使用annotation来控制多个后端服务的流量分配。Ingress-Nginx-AnnotationCanary功能介绍如果想启

Linux

置顶翻译 2021-04-01 21:25:32 605 阅读

k8s实战之理解helm

helmV3的特性：架构改变，去掉Tiller,直接helm通过kubeconfig连接apiserverrelease名称可以在不同命令空间重用chart支持放到docker镜像仓库K8S部署一个应用的流程如下编写yaml:deploymentserviceingress1.0创建deployment模板kubectlcreatedeploymentnginx--image=nginx--dry

Linux

置顶原创 2021-03-26 22:26:27 1772 阅读 1收藏

用Python和JS实现的Web SSH工具，真香！

这个工具是使用Python开发，可以从下面地址了解详情。官网：https://pypi.org/project/webssh/webssh这个工具可以干啥：在linux机器上安装python环境，并且使用命令pip3installwebssh,装上这个模块我们就可以在l浏览器web页面登录我们的linux机器，是不是很强大！功能：1、支持SSH密码验证，包括空密码。2、支持SSH公钥认证，包括D

Linux

置顶转载 2021-03-26 22:21:55 1564 阅读

墙裂推荐！一款 VM 大规模集群管理工具

Google发布了基础设施管理工具VMManager，可自动维护大型ComputeEngine虚拟机集群，VMManager设计考虑到超大规模基础设施，提供自动化部署工具集。Google提到，企业将越来越多的工作负载转移到云上，但管理和运行大规模虚拟机集群会非常复杂，特别是对基础设施和运营管理者来说，在云上大规模管理基础设施，其安全性是一大挑战。因此Google开发了VMManager云原生工具，

Linux

置顶转载 2021-03-23 21:28:00 622 阅读

Python 中的面向对象没有意义

近来，许多人都在抨击面向对象，虽然我不认为面向对象本身有什么问题，但我觉得至少在Python中没这个必要。1.没有必要使用面向对象举个例子，比如下面的代码完全没有必要使用面向对象。classApiClient:def__init__(self,root_url:str,session_cls:sessionmaker):self.root_url=root_urlself.session_cls=

python

置顶转载 2021-03-20 22:11:25 244 阅读

Linux环境变量总结

Linux是一个多用户的操作系统。多用户意味着每个用户登录系统后，都有自己专用的运行环境。而这个环境是由一组变量所定义,这组变量被称为环境变量。用户可以对自己的环境变量进行修改以达到对环境的要求。设置环境变量的方法对所有用户生效的永久性变量这类变量对系统内的所有用户都生效，所有用户都可以使用这类变量。作用范围是整个系统。此文件只在root下才能修改。#vi/etc/profileexportCLA

Linux

置顶转载 2021-03-18 22:52:51 319 阅读

Ansible Playbook详解

Playbook是一个由一个或多个play组成的文件；play是针对特定主机或主机组执行的一组有序的任务；每个playbook必须包含两部分：hosts：运行playbook的一组主机tasks：需要在主机上运行的任务除了这两个必须选项，还有一些可选项选项，也可能需要包含在play中，如：name：play的名称，在运行该play时，会在运行过程中显示。become：与配置文件中的become作用

Linux

置顶原创 2021-03-17 22:35:00 662 阅读 1收藏

python编译后的pyd爆破

最近接触一个国外某app的协议软件，是python3.8写的，它把关键模块都编译成了pyd，然后使用pyinstaller打包发布给用户。软件启动后检查机器码，然后需要输入授权码才可使用，看着很是恼火，所以想尝试破解。其中关键应该是需要爆破pyd里的逻辑，修改汇编代码来实现绕过授权。前提知识1.py、pyc、pyo、pydpy:python脚本文件（sourcecode）pyc:脚本文件编译得到的

Python

置顶转载 2021-03-15 23:50:35 2116 阅读

Ansible 变量

Ansible和其他编辑语言一样，可以通过变量来存储值，并在Ansible项目的所有文件中使用这些值变量的命名规则：必须以字母开头；只能包含字母，数字和下划线；变量范围：Global：全局变量，在命令行中，通过-e参数传递；Play：在Playbook中的play里面通过vars或vars_files关键字定义的变量Host：由清单中，主机或主机组中定义的变量全局变量编写playbook，在该pl

Ansible

置顶原创 2021-03-13 21:25:26 1595 阅读

三分钟构建自动化运维平台-nightingale(夜莺)

最终搭建完成成品监控效果如图所示夜莺是一套分布式高可用的运维监控系统，最大的特点是混合云支持，既可以支持传统物理机虚拟机的场景，也可以支持K8S容器的场景。同时，夜莺也不只是监控，还有一部分CMDB的能力、自动化运维的能力，很多公司都基于夜莺开发自己公司的运维平台。重点是部署方便快捷，相比目前主流的监控系统zabbix和Prometheus有自己的优势。更适合国人的操作习惯和体验，有着许多大公司线

监控

Linux

置顶原创 2021-03-11 22:24:58 1542 阅读

三分钟构建自动化运维平台-nightingale(夜莺)

最终搭建完成成品监控效果如图所示夜莺是一套分布式高可用的运维监控系统，最大的特点是混合云支持，既可以支持传统物理机虚拟机的场景，也可以支持K8S容器的场景。同时，夜莺也不只是监控，还有一部分CMDB的能力、自动化运维的能力，很多公司都基于夜莺开发自己公司的运维平台。重点是部署方便快捷，相比目前主流的监控系统zabbix和Prometheus有自己的优势。更适合国人的操作习惯和体验，有着许多大公司线

监控

Linux

置顶原创 2021-03-11 22:24:54 1512 阅读

Docker容器实战之数据持久化+网络模式+资源限制

docker容器数据持久化的三种方式docker提供三种方式将数据从宿主机挂载到容器中：volumes:Docker管理宿主机文件系统的一部分（/var/lib/docker/vollumes）保存数据的最佳方式。bindmounts:将宿主机上的任意位置的文件或者目录挂载到容器中。tmpfs:：挂载存储在主机系统的内存中，而不会写入主机的文件系统。如果不希望将数据持久存储在任何位置，可以使用tm

Docker

置顶翻译 2021-03-10 22:14:18 2034 阅读 2点赞

Prometheus完整的部署方案+实战实例

Prometheus简介是一套开源的系统监控报警框架。Prometheus作为新一代的云原生监控系统，相比传统监控监控系统（Nagios或者Zabbix）拥有如下优点易管理性：Prometheus核心部分只有一个单独的二进制文件，可直接在本地工作，不依赖于分布式存储高效性：单一Prometheus可以处理数以百万的监控指标；每秒处理数十万的数据点易于伸缩性：通过使用功能分区（sharing）+联邦

Linux

置顶原创 2021-03-09 23:11:06 937 阅读

Prometheus完整的部署方案+实战实例

Prometheus简介是一套开源的系统监控报警框架。Prometheus作为新一代的云原生监控系统，相比传统监控监控系统（Nagios或者Zabbix）拥有如下优点易管理性：Prometheus核心部分只有一个单独的二进制文件，可直接在本地工作，不依赖于分布式存储高效性：单一Prometheus可以处理数以百万的监控指标；每秒处理数十万的数据点易于伸缩性：通过使用功能分区（sharing）+联邦

Linux

置顶原创 2021-03-09 23:11:05 1389 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

马哥Linux培训

Docker 服务终端 UI 管理工具

Docker 服务终端 UI 管理工具

Ceph 架构及性能优化

Python的变量、常量

分布式锁用 Redis 好，还是 ZooKeeper 好？

Redis集群工作原理解析

Go语言并不简单

利用python爬虫爬取网站音乐遇到的坑

ElasticSearch查询的性能与评分问题

教你在 Kubernetes 上部署 Redis 高可用集群

Linux内存、Swap、Cache、Buffer详细解析

PyTorch 1.8发布，支持 AMD GPU 和 Python

Kubernetes 集群网络从懵圈到熟悉

在K8S中部署应用流程

在K8S中部署应用流程

快速搭建高可用 ETCD 集群

Kubernetes Ingress-Nginx 实现蓝绿、灰度发布

k8s实战之理解helm

用Python和JS实现的Web SSH工具，真香！

墙裂推荐！一款 VM 大规模集群管理工具

Python 中的面向对象没有意义

Linux环境变量总结

Ansible Playbook详解

python编译后的pyd爆破

Ansible 变量

三分钟构建自动化运维平台-nightingale(夜莺)

三分钟构建自动化运维平台-nightingale(夜莺)

Docker容器实战之数据持久化+网络模式+资源限制

Prometheus完整的部署方案+实战实例

Prometheus完整的部署方案+实战实例

欢迎