因公司分析订单数据要求，全面装行大数据工程师，在自己摸索Hadoop+Hive+Tez on Hive上花费了不少时间也趟了不少坑。该篇文章主要记录下较新版的Hadoop+Hive搭建遇到比较大的问题在开始的时候并没有使用tez替换计算引擎，公司主要是离线数仓，但是在使用hadoop的MR执行的时候出现了查询数据跟预期结果不同的严重BUG，确认不是sql 的问题，公司的业务需求写了一条较多嵌套的s
转载
2024-10-30 10:14:58
19阅读
前言本文的主要内容：分布式介绍及cerebro构建集群副本与分片集群状态与故障转移文档分布式存储脑裂问题shard详解分布式介绍及cerebroES支持集群模式，是一个分布式系统，其好处主要有两个：增大系统容量，如内存、磁盘，使得ES集群可以支持PB级的数据提高系统可用性，即使部分节点停止服务，整个集群依然可以正常服务ES集群由多个ES实例组成不同集群通过集群名称来区分，可通过cluster.na
转载
2024-08-09 08:06:02
56阅读
每一次分离是为了更好的相聚我期待着每一次与你的相逢每一次拥抱都能让我拥有世间一切的美好每一次亲吻可以让我感受到最幸福的温存
原创
2022-05-14 13:33:42
51阅读
今天看了小五师傅的实习笔记，知道他回校园了，看了他的笔记，感觉到了他的不舍，也让我想起了好多好多···
记得16岁那年，自己自我主张撤了学，把家里人气个半死，走到哪都被人说叨，心里很不爽，于是不顾他们的同意，踏上了去南方的路（现在想想可能就是一种叛逆心理吧!），一直以为自己是对的，觉得自己这样做是没错的，可是当我做上车的时候，我才反应过来，我这次要去的不是离家几里的学校，而是与我
推荐
原创
2008-08-27 23:27:34
2034阅读
10评论
