闭关苦炼内功的博客_经验分享,docker,Linux

SHELL 传参控制进程启停查看状态

bash

linux

服务器

进程状态

原创点赞1 阅读52 收藏0 评论0 20 天前

Linux 服务器 Firewalld 防火墙配置端口转发

linux

Firewalld

服务器

端口转发

内网

原创点赞1 阅读155 收藏0 评论0 26 天前

CentOS7 防火墙 Firewalld 规则配置文件批量放行端口

CentOS7防火墙 firewall 终极版

linux

运维

centos

配置文件

xml

原创点赞1 阅读247 收藏0 评论0 2022-05-15

CentOS7 x86_64 环境 MySQL 5.7 安装教程

CentOS7

数据库

MySQL

mysql

hadoop

原创点赞1 阅读18 收藏0 评论0 2022-04-27

Linux免密大法好 ssh-copy-id 和 expect 免交互输入脚本

这篇文章的小问题实在是困惑我许久（每次都要手动输入密码）今天终于打通 “任督二脉” 了特发此文，谨此纪念文章目录0. 大前提（生成公、私钥）1. 准备依赖2. CV脚本3. 上菜4. 批量使用（数百台机器） 0. 大前提（生成公、私钥）ssh-keygen -t rsa 1. 准备依赖yum install expect tcl-devel

hadoop

大数据

Linux

bash

vim

原创点赞1 阅读207 收藏0 评论0 2022-03-31

DataX 与 Sqoop 对比

sqoop

datax

数据收集

数据校验

原创点赞0 阅读102 收藏0 评论0 2022-03-25

解决 Hadoop 3.1.3 bug: Secondary NameNode 页面不能显示完整信息

1、问题描述访问 Secondary NameNode 页面 http://hadoop104:9868，看不到详细信息2、解决办法（1）在浏览器上按F12，查看问题原因。

hadoop

bug

hdfs

html

重启

原创点赞0 阅读37 收藏0 评论0 2022-03-25

Hive 中的 Null 在底层是以 “\N” 来存储，而 MySQL 中的 Null 在底层就是 Null

Hive 中的 Null 在底层是以 “\N” 来存储而 MySQL 中的 Null 在底层就是 Null为了保证数据两端的一致性在导出数据时采用 --

mysql

数据库

hive

数据

原创点赞0 阅读78 收藏0 评论0 2022-03-25

Kafka机器数量计算

Kafka机器数量（经验公式）= 2 *（峰值生产速度 * 副本数 / 100）+ 1先拿到峰值生产速度，再根据设定的副本数，就能预估出需要部署Kafka的数量。1）峰值生产速度峰值生产速度可以压测得到。用Kafka官方自带的脚本，对Kafka进行压测。kafka-consumer-per

kafka

大数据

压测

网络传输

原创点赞0 阅读41 收藏0 评论0 2022-03-25

yarn 配置日志聚集

日志聚集概念：应用运行完成以后，将程序运行日志信息上传到HDFS系统上。日志聚集功能好处：可以方便的查看到程序运行详情，方便开发调试。注意：开启日志聚集功能，需要重新启动NodeManager 、ResourceManager 和 History

hadoop

大数据

日志聚集

xml

程序运行

原创点赞0 阅读42 收藏0 评论0 2022-03-25

日志采集Flume配置选择

可选择 TaildirSource和KafkaChannel，并配置日志校验拦截器。选择TailDirSource和KafkaChannel的原因如下：1）TailDirSourceTailDirSource相比ExecSource、SpoolingDirectorySource的优势TailDirSource：断点续传、多目录。Flume1.6以前需

flume

大数据

kafka

数据

断点续传

原创点赞0 阅读46 收藏0 评论0 2022-03-25

Kafka分区数计算

（1）创建一个只有1个分区的topic（2）测试这个topic的producer吞吐量和consumer吞吐量。（3）假设他们的值分别是Tp和Tc，单位可以是MB/s。（4）然后假设总的目标吞吐量是Tt，那么分区数 = Tt / min（Tp，Tc）例如：producer吞吐量 = 20m/s；consumer吞吐量

kafka

原创点赞0 阅读41 收藏0 评论0 2022-03-25

修改 Hive 元数据库默认字符集，解决乱码问题

修改 Hive 元数据库默认字符集

hive

数据库

mysql

ico

原创点赞0 阅读105 收藏0 评论0 2022-03-25

configure: error: readline library not found

解决：yum -y install readline-devel然后再执行 ./configure

linux

运维

原创点赞0 阅读58 收藏0 评论0 2022-03-16

shell 日期格式 2022-03-15

shell 日期格式

linux

原创点赞0 阅读67 收藏0 评论0 2022-03-16

DBeaver SQL 编辑器显示行号

DBeaver

显示行号

菜单栏

首选项

原创点赞0 阅读174 收藏0 评论0 2022-03-16

mysql 用户权限管理之增删改查

mysql 用户权限管理经常会使用到，之前也分享过，但是绝对没有这篇详细这篇文章会对如何增删改查 mysql 用户做详细具体展开

mysql

用户权限管理

数据库

ide

原创点赞0 阅读108 收藏0 评论0 2022-03-08

鲲鹏 920 openEuler 操作系统部署安装 Anaconda3 和 Jupyter Notebook

之前写过鲲鹏920 CentOS7 部署安装 Archiconda3 和 Jupyter notebook 的文章也有朋友说，怎么没有 Anaconda3 呐，当时啊，官方还没出 aarch 版本（适配鲲鹏920）近期突然发现，官方发布 Anaconda3 aarch 版本了所以，本文带大伙走一波，玩一哈

Anaconda3

Jupyter

Notebook

python

linux

原创点赞0 阅读202 收藏0 评论0 2022-03-07

rpmbuild 底层原理

Preparing to build RPMsThe main tasks in building RPMs are:Planning what you want to build应用软件二进制程序、程序库一堆系统配置文件文档包创建一个

linux

rpm

centos

rpmbuild

rpm包

原创点赞0 阅读337 收藏0 评论0 2022-03-04

iputils-ping 安装后可以使用 ping

iputils-ping 安装后可以使用 pingapt -y install iputils-ping

linux

原创点赞0 阅读287 收藏0 评论0 2022-03-04

vi 编辑器大法之 shift + d 从当前光标位置删到行尾

vi 编辑器大法之 d 然后 shift + g 从当前光标位置删到尾行dG（d，shift + g）

vim

vi

原创点赞0 阅读169 收藏0 评论0 2022-03-04

修改docker容器默认时间

遇到一个问题：进入docker容器后发现时间慢了8h，下面我们来一起解决先看截图吧就是下面这条命令啦mv /etc/localtime /etc/localtime.bak && cp

docker

linux

原力计划

新星计划

图吧

原创点赞0 阅读154 收藏0 评论0 2022-03-04

解决报错bash: netstat: commond not found

yum -y install net-tools

linux

原力计划

新星计划

原创点赞0 阅读111 收藏0 评论0 2022-03-04

解决Warning: “continue“ targeting switch is equivalent to “break“. Did you mean to use “continue 2“?

遇到报错信息Warning: “continue” targeting switch is equivalent to “break”. Did you mean to use “continue 2”? in /apps/svr/httpd-2.4.48/htdocs/ganglia/functions.php on line 726这个原因是php7

linux

php

bug

原力计划

新星计划

原创点赞0 阅读151 收藏0 评论0 2022-03-04

docker导出镜像为本地tar文件，本地tar文件加载成容器镜像

将镜像保存为本地tar文件，其中tb4为image id的前三位docker save tb4 > /root/demo-1.tar 使用load加载tar文件docker load < /root/demo-1.tar 使用docker

docker

linux

centos

原力计划

新星计划

原创点赞0 阅读379 收藏0 评论0 2022-03-04

Docker容器systemctl启动服务报错Failed to get D-Bus connection: Operation not permitted

解决办法：创建容器时加上 --privileged=truedocker run -d -name c7-1 --privileged=true centos:7 /usr/sbin/init进入容器：docker exec -it c7-1 /bin/bashby doing this …就可以在容器中使用 systemctl 启动服务了

docker

linux

systemctl

原力计划

新星计划

原创点赞0 阅读162 收藏0 评论0 2022-03-04

docker提交配置好的容器生成一个新的镜像

docker提交配置好的容器，生成一个新的镜像之后启动以配置好的镜像作为模板启动docker commit -a "it-coding" -m "1st commit" 容器id namespace/name:tag

docker

linux

原力计划

新星计划

原创点赞0 阅读107 收藏0 评论0 2022-03-04

树莓派4B安装中文输入法fcitx

去某度搜了一些树莓派安装中文输入法的方式，有一哥们写的是安装scim-pinyin操作是sudo apt-get install scim-pinyin结果本小白尝试以后呐，不得行，用不了，所以本小白果断卸载了它（快速卸载）sudo apt-get remove scim-pinyinsudo apt autoremove于是本小白去小破站转了转，某老哥搞得也是fcitx，昨天也

树莓派

原力计划

新星计划

Debian10

中文输入法

原创点赞0 阅读193 收藏0 评论0 2022-03-04

解决报错httpd: Could not reliably determine the server‘s fully qualified domain name

vi httpd.conf#ServerName www.example.com:80ServerName localhost:80Stopping httpd: [ OK ]Starting httpd: [ OK ]

linux

httpd

原力计划

新星计划

原创点赞0 阅读138 收藏0 评论0 2022-03-04

docker进入容器报bash: warning: setlocale: LC_CTYP: cannot change locale (en_US.UTF-8)：No such file or dir

解决办法localedef -i en_US -f UTF-8 en_US.UTF-8

docker

原力计划

新星计划

bash

报错信息

原创点赞0 阅读192 收藏0 评论0 2022-03-04

官方博客	意见反馈	了解我们	全部文章
在线客服	网站地图	热门标签

51CTO博客

闭关苦炼内功的博客