Hive运行方式：命令行方式cli：控制台模式脚本运行方式（实际生产环境中用最多）JDBC方式：hiveserver2web GUI接口 （hwi、hue等）Hive在CLI模式中 与hdfs交互 执行执行dfs命令 例：dfs –ls / 与Linux交互 ！开头 例： !pwdHive脚本运行方式：hive -e “” 直接执行引号中的语句,可以写多条，用分号分隔
hive -e “” >
转载
2023-07-13 21:41:00
43阅读
摘要智能运维AIOps平台结合大数据和机器学习功能来支持IT运维。I&O（基础设施和运维/运营）领导人应该开始部署这样的平台，以加强目前的性能监控，但计划需要5年时间来扩展到服务台和自动化系统。概述- 关键发现 在过去的三年里，IT部门分别部署了大数据和机器学习技术，以支持IT运维的监控。然而，在过去的6个月里，企业开始将他们的IT运维导向的大数据和机器学习项目结合起来，并将它们扩展到服务
转载
2024-01-29 06:36:39
80阅读
Hive 题：启动先电大数据平台的 Hive 数据仓库,启动 Hvie 客户端,通过 Hive 查看 hadoop 所有文件路径（相关数据库命令语言请全部使用小写格式）。1. [root@master ~]# hive log4j:WARN No such property [maxFileSize] in org.apache.log4j.DailyRollingFileAppender.
L
转载
2023-12-20 21:34:57
50阅读
01 Elasticsearch x-pack 监控工具x-pack 是 Elastic Stack 扩展的功能，提供安全性，警报，监视，报告，机器学习和许多其他功能。 ES7.0+之后，默认情况下，当安装Elasticsearch时，会安装X-Pack，无需单独再安装。Elasticsearch x-pack02 ElasticSearch Search Guard 安全认证工具在 x-pack
转载
2024-05-09 16:19:34
92阅读
Hive教程Hive概念Hive是什么Hive不适合做什么数据单元数据类型内置运算和函数SQL用法和实例创建表浏览表和分区修改表删除表加载数据查询和插入数据简单的查询基于查询的分区连接聚合多表/文件插入动态分区插入插入到本地文件抽样全连接数组操作Map（关联数组）操作定制Map/Reduce脚本Co-Groups Hive教程Hive概念Hive是什么Hive是基于Apache Hadoop的数
转载
2023-09-20 04:59:26
39阅读
OPENSTACK命令手册 公开目录主机常用命令 1.1. 查询类 1.1.1. 网络接口查询 1.1.2. 主机ip信息查询 1.2. 编辑类 1.2.1. 网络接口编辑 1.2.2. 主机ip信息编辑认证服务常用命令 2.1. 查询类 2.1.1. Apache http服务状态查询 2.1.2. Apache http 服务日志查询 2.1.3. OpenStack域列表
转载
2023-09-23 16:20:37
200阅读
进入IT行业差不多也有三年时间了，想着自己从一个小白，一路莫爬滚打走到现在，挺不容易的，因为大学学的不是计算机专业，实习公司又是一个软件开发公司，自己的实习部门又是后端技术部门，也算是机缘巧合吧，成为我踏入IT的前因。 本帖只是对我在这么久工作过程和以后工作过程中遇到的一些问题做一次汇总，可能有简单的，希望大神不要见笑，也可能有棘手的，知道解决方法的小伙伴欢迎交流，希望能
转载
2023-10-16 16:55:22
119阅读
乘长假期间春光明媚，得空回顾了一下十年工作。深以为，运维安全绝对是企业安全保障的基石。看到这儿，有些程序猿不禁要问，哥们，你是不是写错了，应该是安全运维吧！非也！事实上，安全运维和运维安全是两个概念。我的理解：安全运维是工程师对各种安全设备和软件进行运维保障系统安全，而运维安全相比之下是涵盖了整个云计算系统和安全有关的方方面面。本文主要探讨公有云环境下运维安全常见的难题及解决方案。目前使用公有云的
墨墨导读：日常MySQL运维中，会遇到各种各样的问题，下面分享二十个MySQL运维案例，附有问题的分析和解决办法，希望你遇到同样的问题的时候，可以淡定地处理。一. 执行存储过程/函数报错账号不存在问题描述执行存储过程报错mysql>call create_no_by_day('STUDENT','CREATE_TIME');
ERROR 1449 (HY000):The user speci
转载
2023-11-09 05:41:09
267阅读
1、副本集部署教程1.1、要求三个成员副本集提供足够的冗余以承受大多数网络分区和其他系统故障。这些副本集也具有足够的容量用于许多分布式读取操作。副本集应始终具有奇数个成员。这可确保选举顺利进行。对于生产部署，应该通过在不同的计算机上托管mongod实例来尽可能多地保持成员之间的分离。当使用虚拟机进行生产部署时，应将每个mongod实例放在由冗余电源电路和冗余网络路径服务的单独host服务器上。1.
转载
2024-01-15 01:18:57
377阅读
一、sh 脚本
原创
2022-09-16 21:01:00
127阅读
工作中遇到以下问题：1、一台zk节点失联后，重启一直无法加入zk集群中，导致无法对外提供服务2、zk的log和快照占大量空间3、客户端连接有失败有成功4、zk客户端偶尔会有失败连接5、报错：smallerserveridentifier,sodropping以上问题生产环境中经常会遇到1.zk无法加入zk集群现象:使用zkCli.sh无法连接成功该zk节点日志:首先想到的是将该节点restart,
原创
2018-09-09 11:12:30
4614阅读
Redis开发与运维读书笔记 虽然一直使用redis，但是对redis缺少整体的一个学习，这两天趁着有时间就把这本书拿出来看了下，这本书应该来说是很有阅读空间的，读的过程做了些笔记，相当于备忘单线程架构redi
运维问题排查思路1、常见的方法：1）确定故障现象并初判问题影响在处理故障前，运维人员首先要知道故障现象，故障现象直接决定故障应急方案的制定，这依赖于运维人员需要对应用系统的整体功能有一定的熟悉程度。确认了故障现象后，才能指导运维人员初判断故障影响。2）应急恢复运维最基本的指标就是系统可用性，应急恢复的时效性是系统可用性的关键指标。有了上述故障现象与影响的判断后，就可以制定故障应急操作，故障应急有很
转载
2019-09-08 21:43:00
229阅读
2评论
1、Dede(织梦)发表文章时,内容自动添加关键字显示空白页解决方法：后台>系统>系统基本参数>核心设置>关键字替换（是/否），这里选择“是”。后台>系统>系统基本参数>其他选项>自动提取关键字，这里选择“是”。 2、解决PHP168超级管理员上传图片提示你的空间不足网站是用PHP168做的，反映使用管理员在后台无法上传图片，...
原创
2022-08-05 16:58:06
112阅读
一、网站
原创
2022-09-16 21:00:33
84阅读
一、修改IIS自带的FTP管理器的端口如果客户的云主机使用的是iis自带的ftp管理软件，当创建完账号后无法登陆，有
原创
2022-12-16 17:12:04
113阅读
问题1：情况是这这样：使用外网在中台上传图片文件，上传的文件100k以内没问题，上传超过了100k,没有返回（也就是没有成功）。但是使用内网上传，不管是多大都没问题，都能成功。这样对比下，无非外网比内网多走了一个nginx。再次复现上面使用外网上传大图片不成功的情况，因为这个中台是通过一个nginx映射来使外网访问的。所以同时查看这个nginx报错的信息：从上面的报错很明显是权限的问题。解决办法：
原创
2017-07-28 22:42:49
2405阅读
使用 chattr -i /etc/sysctl.conf 删除文件隐藏权限（i权限）。/etc/sysctl.conf这个文件添加了隐藏权限（i权限），导致文件修改失败。/etc/hosts里面
原创
2023-04-29 00:29:12
149阅读
转载的，个人感觉写的很实在，简单明了，精辟！
运维工作尤其是linux运维，其实最考验你的能力，因为需要学习的东西实在太多，
你既要懂网络：思科华为设备的配置；
要懂性能调优：包括lamp或者lnmp的性能调优，也包括linux操作系统调优；
要懂数据库mysql或者nosql（例如mongodb）：
要懂编程语言：Shell是最基本的，还要学习perl，pyth
转载
精选
2012-02-06 11:59:15
8655阅读
2评论
