运维记录_51CTO博客

【运维】Linux运维命令记录

使用命令重新设置一下root账户的密码 passwd root根据提示设置一下密码，然后使用sudo -i 时输入密码就可以切换到root账户了。ssh登陆以后，要用sudo -i命令给用户提权，提到超级管理员，然后输入密码才有用。

#运维

#linux

#服务器

重置

root密码

原创

我是Superman丶

1月前

0阅读

运维项目记录

运维项目是一个springboot项目，有简单的前端页面。 pom文件如下 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www. ...

spring

html

apache

redis

运维

转载

mob604756f37073

2021-10-19 22:19:00

465阅读

2评论

Huawei运维记录

Huawei运维记录 01 Huawei运维记录-AC6005-8AP设备启动界面 02 Huawei运维记录-AC6005-8AP添加授权码 03 Huawei运维记录-AC6005版本升级步骤

运维

版本升级

启动界面

原创

CARLOS_KONG

2022-08-19 21:16:43

125阅读

关闭开启ES集群顺序：*第一步，禁止分片自动分布PUT_cluster/settings{"persistent":{"cluster.routing.allocation.enable":"none"}}*第二步，执行同步刷新POST_flush/synced*第三步，各节点逐个关闭#通过服务关闭#sudosystemctlstopelasticsearch.service#发送TERM信号关闭

UNASSIGNED

shards

原创

heieye104

2021-03-24 16:12:39

2754阅读

CEPH 运维记录

基于l 版本。 1、osd 状态 ceph -s active：PG 处于活动状态，正在处理读写请求。 clean：PG 中的所有对象都是最新的，所有副本都已同步

数据

对象存储

Group

原创

80民工

2024-10-15 12:18:40

125阅读

MYSQL 运维相关记录

MySQL安装完成后不象SQL Server默认安装在一个目录，它的数据库文件、配置文件和命令文件分别在不同的目录，了解这些目录非常重要，尤其对于Linux的初学者，因为 Linux本身的目录结构就比较复杂，如果搞不清楚MySQL的安装目录那就无从谈起深入学习。下面就介绍一下这几个目录。 1、数据 ...

mysql

配置文件

linux

启动脚本

数据

转载

mob604756eedb0b

2021-10-15 16:50:00

127阅读

2评论

ES运维API记录

1、查询ES所有的索引集合按照存储由大到小排序：http://192.168.60.12:9200/_cat/indices?bytes=b&s=store.size:desc,index:asc&v=true health status index uuid pri rep docs.count ...

tomcat

linux

centos

d3

开发工具

转载

mb5ff2f2755a961

2021-10-26 17:17:00

243阅读

2评论

命令记录收集记录-运维笔记

#用户命令收集记录 https://www.cnblogs.com/kevingrace/p/5570411.html 环境CentOS 7 yum install rsyslog -y 一,服务端 [root@server ]# cat /etc/rsyslog.conf|grep -v "#"| ...

bash

客户端

初始化

环境变量

端口号

转载

mb5fd8698f60f87

2021-10-02 18:23:00

211阅读

2评论

Hadoop运维记录系列(二)

下周准备去某地做Hadoop相关的技术培训，主要负责讲解Hadoop的安装部署和运维部分，赶制了一份PPT，将平时工作中遇到的问题也提取了一下，希望能对Hadoop运维相关人员有所帮助，算是个补上的运维记录吧，错误数据均来自以前日常工作中的Hadoop日志。也有一点点跟Hadoop相关的非保密数据，拿出来晒晒。目前公司的数据规模如下，相比大公司不算是很大的数据量，但是也不是很小。 &nb

运维

hadoop

故障分析

推荐原创

Slaytanic

2012-12-09 01:56:50

10000+阅读

6点赞

5评论

Hadoop运维记录系列(五)

今天集群神秘崩溃，影响范围较大，分析故障原因比较有趣，特此记录一下。之前也发生过类似的事情，不过没想起写blog，今天正好抓出log来写了。当时的状况是，下午16点左右，集群处于比较繁忙的状态，突然集群数台服务器崩溃，已经无法ssh远程连接服务器，只好找ops重启服务器，然后就是正常的重启datanode和tasktracker。先恢复起来，再去看log，但是去看hadoop log的时候就心

记录

运维

hadoop

故障分析

推荐原创

Slaytanic

2013-04-03 22:52:33

10000+阅读

7点赞

6评论

Hadoop运维记录系列(十四)

周末去了趟外地，受托给某省移动公司(经确认更正，是中国移动位置基地，不是省公司)做了一下Hadoop集群故障分析和性能调优，把一些问题点记录下来。该系统用于运营商的信令数据，大约每天1T多数据量，20台Hadoop服务器，赞叹一下运营商乃真土豪，256G内存，32核CPU，却挂了6块2T硬盘。还有10台左右的服务器是64G内存，32核CPU，4~6块硬盘，据用户反馈，跑数据很慢，而且会有失败，重跑

运维

系列

hadoop

推荐原创

Slaytanic

2015-04-20 17:04:42

9953阅读

15点赞

6评论

Hadoop运维记录系列(十五)

早期搭建Hadoop集群的时候，在做主机和IP解析的时候，通常的做法是写hosts文件，但是Hadoop集群大了以后做hosts文件很麻烦，每次加新的服务器都需要整个集群重新同步一次hosts文件，另外，如果在同一个域下面做两个集群，做distcp，也需要把两个集群的hosts文件全写完整并完全同步，很麻烦。那么，一劳永逸的办法就是做DNS。DNS我这边已经用了很长时间了，几年前为了学这个还专门买

记录

运维

系列

hadoop

推荐原创

Slaytanic

2015-04-30 13:19:25

8641阅读

Hadoop运维记录系列(十六)

应了一个国内某电信运营商集群恢复的事，集群故障很严重，做了HA的集群Namenode挂掉了。具体过程不详，但是从受害者的只言片语中大概回顾一下历史的片段。Active的namenode元数据硬盘满了，满了，满了...上来第一句话就如雷贯耳。运维人员发现硬盘满了以后执行了对active namenode的元数据日志执行了 echo "" > edit_xxxx-xxxx...第二句话如五雷轰顶

记录

运维

系列

hadoop

原创

Slaytanic

2015-08-28 17:20:28

9313阅读

3点赞

1评论

Kubernetes运维-日常点滴记录

k8s运维日常

Linux运维

k8s

kubernetes

k8s运维

kubernetes运维

原创

chaijowin

2023-08-12 07:51:50

253阅读

Hadoop运维记录系列（一）

这两天参加了51CTO举办的云计算架构师峰会，办的非常好，很多干货。确实比一些名不副实的所谓大数据实际都是厂商推销产品的会议要强得多。但是其实这事跟Hadoop运维没关系，但是这两天集群发生的故障影响了我听报告。说起来很奇幻，集群里面有三台服务器需要升级CPU，这本无可厚非。但是不多不少，恰恰是三台，符合Hadoop集群配置的replication数量。之间运维人员没有提前跟我们进行沟通，基本就是

运维

hadoop

故障分析

推荐原创

Slaytanic

2012-10-26 22:06:25

10000+阅读

15点赞

18评论

Hadoop运维记录系列(三)

Hive 0.10发布了，修正了一些bug，搞了一些新特性，对提高工作效率很有帮助，于是尝试升级了一下，然后遇到了一些问题，记录一下。主要是看上了下面几个feature，打算换上看看。 1. Allow SELECT <col> without a mapreduce job

运维

hadoop

故障分析

推荐原创

Slaytanic

2013-01-30 15:06:36

10000+阅读

2点赞

2评论

Hadoop运维记录系列(四)

记录一下，可能算是个比较典型的故障，磁盘满导致的task tracker无法启动。故障是一台tasktracker挂了，怎么也起不来，报错信息如下。 2013-03-26 17:34:57,620 ERROR org.apache.hadoop.mapred.TaskTracker: Can not start&nb

运维

hadoop

故障分析

推荐原创

Slaytanic

2013-03-26 19:04:00

9955阅读

4点赞

4评论

Hadoop运维记录系列(八)

新部署了几个接收服务器，因为以前的老业务都是nginx接收的，没法迁移到scribe或者fluentd上。所以，只能在这些服务器上部署hadoop的client，用fs -put的方法把nginx生成的NCSA日志定时放到HDFS里。也就是在nginx服务器上需要部署hadoop的client。hadoop部署好了之后交给别人做日志的put脚本，然后一会报告我，put失败。而且是一会成功一会失败，

记录

运维

hadoop

故障分析

推荐原创

Slaytanic

2013-07-17 18:56:11

5448阅读

1点赞

3评论

Hadoop运维记录系列(十七)

上个月通过email，帮朋友的朋友解决了一个Cloudera的Spark-SQL无法访问HBase做数据分析的问题，记录一下。

运维

hadoop

spark

hbase

hive

推荐原创

Slaytanic

2015-11-13 19:00:35

10000+阅读

8点赞

5评论

Hadoop运维记录系列(十八)

之前为了练习英语用英文写的这个博客，然后被编辑置为转载了，所以想想还是翻译过来比较好。原文发表于 https://xianglei.tech 确实是我自己原创的。英文很烂，所以才需要练习。使用Cloudera Manager启用Kerberos安全增强的Hadoop集群(包括一步步安装和配置kerberos)以及kerberos基本原理目前我工作于AdMaster，某个全球五百强的大企业是我们的深

secure

cluster

hadoop

kerberos

原创

Slaytanic

2017-04-24 22:37:41

10000+阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

运维记录

【运维】Linux运维命令记录

运维项目记录

Huawei运维记录

es运维记录

CEPH 运维记录

MYSQL 运维相关记录

ES运维API记录

命令记录收集记录-运维笔记

Hadoop运维记录系列(二)

Hadoop运维记录系列(五)

Hadoop运维记录系列(十四)

Hadoop运维记录系列(十五)

Hadoop运维记录系列(十六)

Kubernetes运维-日常点滴记录

Hadoop运维记录系列（一）

Hadoop运维记录系列(三)

Hadoop运维记录系列(四)

Hadoop运维记录系列(八)

Hadoop运维记录系列(十七)

Hadoop运维记录系列(十八)

Hadoop运维记录系列(十九)

Hadoop运维记录系列（二十）

网络安全运维记录

Hadoop运维问题记录

Hadoop运维记录系列(六)

Hadoop运维记录系列(七)

Hadoop运维记录系列(九)

Hadoop运维记录系列(十)

Hadoop运维记录系列(十一)

Hadoop运维记录系列(十二)