一、 简介historystarted by Chad Walters and Jim2006.11        Google release paper on BigTable2007.2&nbs            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-12 19:36:31
                            
                                89阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            目录:一、Hbase组件1.上传hbase包解压后重命名(HBase)2.编辑环境变量3.hbase-site.xml4.设置regionserver5.分发目录6.启动HBase集群**排错记录:**(①HMaster存在 HRegionServer起不来②或者一会就挂掉,查日志无报错)二、Hive组件(一)hive安装和配置1.上传包解压,配置环境变量2.安装启动MySQL3.初始化设置My            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-01-03 08:45:37
                            
                                78阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1         Hbase日常运维1.1       监控Hbase运行状况1.1.1        操作系统1.1.1.1 IO 群集网络IO,磁盘IO,HDFS IOIO越大说明文件            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-27 20:36:50
                            
                                108阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            一,基本命令:    建表:create 'testtable','coulmn1','coulmn2'     也可以建表时加coulmn的属性如:create 'testtable',{NAME => 'coulmn1', 
BLOOMFILTER => 'NONE', REPLICATION            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                            精选
                                                        
                            2016-07-28 10:32:23
                            
                                2884阅读
                            
                                                                             
                 
                
                             
         
            
            
            
                 http://eclecl1314-163-com.iteye.com/blog/1704249              
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-05-05 16:14:14
                            
                                58阅读
                            
                                                                             
                 
                
                             
         
            
            
            
              客户端在进行put、delete、get等操作的时候,它都需要数据到底存在哪个Region Server上面,这个定位的操作是通过HConnection.locateRegion方法来完成的。  loc = hConnection.locateRegion(this.tableName, row.getRow());    这里我们首先要讲hbase的两张元数据表-ROOT-和.META.表,            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-13 16:10:26
                            
                                83阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            非常好的hbase实践篇,是毕玄同学的大作,NoSQL现在风生水起,hbase的使用也越来越广,但目前几乎所有的NoSQL产品在运维上都没法和DB相提并论,在这篇blog中来总结下我们在运维hbase时的一些问题以及解决的方法,也希望得到更多hbase同行们的建议,:)在运维hbase时,目前我们最为关注的主要是三大方面的状况:1. Cluster load;2. 读写;3. 磁盘空间。1.            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-12-05 12:18:19
                            
                                29阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            第 7 章HBase 优化7.1 高可用在 HBase 中 Hmaster 负责监控 RegionServer 的生命周期,均衡 RegionServer 的负载,如果 Hmaster 挂掉了,那么整个 HBase 集群将陷入不健康的状态,并且此时的工作状态并不会维持太久。所以 HBase 支持对 Hmaster 的高可用配置。 1.关闭 HBase 集群(如果没有开启则跳过此步)[lx            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-05-17 18:03:15
                            
                                39阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            一. zk集群
   1. 查看当前服务的角色 leader/follower
       echo stat|nc 127.0.0.1 2181
   2.  启动ZK服务:      
        sh bin/zkServer.sh start
   3. 查看ZK服务状态:
        sh bin/zkServer.sh status
   4. 停止ZK服务:      
             
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2015-09-22 10:49:00
                            
                                161阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            虽未正确操作就是不要浏览恶意网站,不要为了什么关掉你的防火墙和杀毒软件。不要在未知网站下载软件。(很容易中木马)记得前一篇博文介绍了远程控制任我行这个软件。其实木马的原理跟这个软件是一样的,将服务器端跟应用程序融合在一起,然后你运行应用程序了之后,就相当于你运行了服务器端,客户端就可以随之控制你的计算机了,对你的计算机的信息进行盗取和删除。(后面会说破解木马的方法。一招解决,藏一手,让你看完&nb            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2010-03-22 22:25:56
                            
                                426阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            日常检查与维护
1 日常维护
每日:*检查控制器显示的温度和相对湿度值与实际是否相符。
      *检查控制器记录,查看相关报警,如有报警及时处理。对无人值守的机房需通过监控终端进行检查。
每月:
*室内风机 检查风机与马达运转正常。无异常噪声,并且轴承不热。对于皮带传动的机组,检查传动皮带,用手指拉紧时,是否能延长2CM。
*空            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2011-04-19 11:25:00
                            
                                617阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Jannis Leidel是Jazzband社区的一部分。 Jazzband是一个协作社区,肩负着维护基于Python的项目的责任。  Jazzband的诞生源于长期维持一个开源项目的压力。 詹尼斯(Jannis)是一名巡回演出者,这意味着他可以执行管理任务,并确保乐队中的人们可以在需要时播放。  Jazzband不是他的第一个开源志愿者工作,他是Django核心开发人员, Django Sof            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-11-04 15:14:00
                            
                                105阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            “甭管唱反调的人怎么唱衰,Python 在下一个十年仍然很重要,并且会与时俱进。”Python 是一门了不起的编程语言,它改变了游戏规则,将编程的格局提升到了一个完全不同的层次。Python 的迅速崛起对整个行业来说都是极其有利的,但是当它越来越受欢迎时,却总是受到批评。最近,我看过一些文章和视频,它们似乎都在表明,Python 的辉煌时代行将终结。由 Python 引发的批评经常有:“它是一种缓            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-08-20 19:39:50
                            
                                57阅读
                            
                                                                             
                 
                
                             
         
            
            
            
             当软件项目进入“维护模式”时,原本的代码可读性与编码标准往往很难得到保证。(当然,这些标准在软件项目建立之初就不容易坚持实施。)但必须强调的是,在代码库中保持样式与测试标准的一致性,正是降低维护负担的重要前提。只有这样,我们才能确保未来的开发人员得以快速了解新的情况,并随着时间推移切实保证项目与应用程序的健康状况。保护项目未来可维护性的一种理想方式,在于利用外部库检查您的代码运行状况。            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-01-10 18:14:24
                            
                                66阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Hadoop运维人员,负责为Hadoop提供一个高效和可靠的作业执行环境,很多时候,需要从全局出发,通过调整一些关键参数以提供系统的性能和吞吐量.总体上看,Hadoop运维需要从硬件选择,操作系统参数调优,JVM参数调优,Hadoop参数调优四个方面着手进行调优 1.硬件选择  在硬件环境中,应着重提高Master机的物理性能(使用更好的CPU和更大的内存等等).  Hadoop自身是主            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-02-05 14:44:33
                            
                                64阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            【物理与逻辑存储】    此公司使用一种廉价的存储模式,用iSCSI方式来达到FC SAN的功能。    物理存储构架在一台 DELL 服务器上,使用 FreeNAS 来做 iSCSI,然后使用两台 DELL 服务器做ESXi5.0 的的虚拟化系统。FreeNAS 层为UFS2文件系统,整个存储建一个稀疏模式的文件,挂给ESXi5.0 系统。ESXi系统内跑            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-08-20 23:08:30
                            
                                111阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            前言zabbix作为开源监控平台,其强大是业界公认的。如果想了解zabbix具体功能及使用方法,可以参考链接: zabbix从入门从精通、官方说明文档(什么,打不开?多刷几次 :) )言归正传,下面就对zabbix维护状态的实现做一个代码层面的分析说明。版本本文针对的zabbix版本是2.4.8文件主要涉及文件:timer.c函数调用关系zabbix server 启动过程中,专门创建了一个tim            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-08-16 09:42:38
                            
                                123阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            
		
		
		
		IP与MAC绑定的难题  
 问:我的计算机原来采用公网固定IP地址。为了避免被他人盗用,使用“arp -s ip
mac”命令对MAC地址和IP地址进行了绑定。后来,由于某种原因,又使用“arp -d ip
mac”命令取消了绑定。然而,奇怪的是,取消绑定后,在其他计算机上仍然不能使用该IP地址,而只能在我自己的计算机上使用。需要说明的是,我的计算机
并不            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2008-01-09 13:04:15
                            
                                1303阅读
                            
                                                                             
                 
                
                             
         
            
            
            
                确实,数据库的维护常常交给那些专业的数据库管理员,但是作为一个开发者,你也许偶尔需要暂时从事这个工作。所以,试一试这两个SQL服务器维护技巧:轻松改变数据库拥有者、整理索引碎片。谁会想到你甚至可以给那些数据库管理员教上一两个新技巧呢? 重指定数据库拥有者 当回复或者新建数据库时,你有没有注意到SQL Server把数据库的拥有者置为你的NT登录名?仅            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2008-12-07 12:04:00
                            
                                281阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            排除 防火墙等等,网络设置的错误外,
登录putty.exe, 使用以下命令来启动 vnc server:
共两行:  service vncserver star
 vncserver
连接失败:套接字操作尝试一个无法连接的主机。(10065)
问题在于配置redhat的vncserver时,没有将默认的端口号5900+n添加到防火墙中。在使            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                            精选
                                                        
                            2011-11-03 17:18:46
                            
                                829阅读