从2012年11月开始，研究和学习storm有三个月，觉得storm
是一个非常使用的工具，下面记录下心得以 共享。（单机版）本身使用closure编写，配置文件使用yaml，连README文件都用Markdown写。整个一反Haoop的Java+XML+HTML这些传统技术。安装Storm之前要先安装下面几个软件。一、准备工作1、安装zeromq。wget
http://download.zer
转载
精选
2015-04-22 12:14:34
514阅读
1，install zeromq
期间可能出现：configure: error: cannot link with -luuid, install uuid-dev. 因此可以先安装
sudo apt-get install uuid*
sudo apt-get install libtool
wget http://download.zeromq.org/zeromq-2.2.0.tar.gz
转载
2013-12-02 14:43:00
158阅读
2评论
storm的官方安装说明（e文）：https://github.com/nathanmarz/storm/wiki/
原创
2023-03-22 22:19:09
60阅读
要使用storm首先要安装以下工具：JDK、Python、zookeeper、zeromq、jzmq、storm（注：各个模块都是独立的，如果安装失败或者卡顿可以单独百度某个模块的安装，都是可以的。）JDK1.7安装 参见上篇《Ubuntu下安装配置JDK1.7》://www....
原创
2022-02-09 10:30:35
122阅读
要使用storm首先要安装以下工具：JDK、Python、zookeeper、zeromq、jzmq、storm（注：各个模块都是独立的，如果安装失败或者卡顿可以单独百度某个模块的安装，都是可以的。）JDK1.7安装 参见上篇《Ubuntu下安装配置JDK1.7》://www....
原创
2022-02-14 15:46:40
156阅读
环境准备
需要环境：
PC-1 Suse Linux 9 10.192.1.1
PC-2 Suse Linux 9 10.192.1.2
PC-3 Suse Linux 9 10.192.1.3
PC-4 Suse Linux 9 10.192.1.4
转载
2023-07-12 09:06:05
87阅读
1.安装...
原创
2022-10-27 10:56:01
188阅读
Hadoop单机版环境搭建一、前置条件Hadoop 的运行依赖 JDK，需要预先安装，安装步骤见：Linux 下 JDK 的安装二、创建hadoop账号####1、使用root账号登录，通过useradd增加用户：useradd -m hadoop -s /bin/bash####2、给hadoop新用户设置密码：passwd hadoop####3、给hadoop用户增加管理员权限： 输入指令v
转载
2023-07-20 17:28:10
72阅读
我们知道Jedis在处理Redis的单机版和集群版时是完全不同的，有可能在开发的时候使用的是单机版，但是当项目上线后使用的则是集群版，这就需要能够方便的在单机版和集群版之间进行切换了。我们的做法便是定义一个JedisClient接口，然后新建两个实现类来分别处理单机版和集群版，这样便可以面向接口开发，而不影响业务逻辑了，最后再使用Spring容器来管理这两个实现类，部署时切换实现类即可。首先在ta
首先要安装zookeeper 安装zeromq以及jzmqjzmp的安装貌似是依赖zeromq的，所以应该先装zeromq，再装jzmq。1、安装zeromq： jzmq dependencies 依赖包sudo yum install uuid*sudo yum install libtoolsudo yum install libuuid sudo yum ins
转载
精选
2016-06-08 14:57:40
1156阅读
写下搭建测试用的storm环境步骤：一、系统Redhat6.5_x86二、所需软件包jdk-7u67-linux-x64.tar.gzjzmq-master.zipstorm-0.7.1.zipzeromq-2.1.7.zipzookeeper-3.3.5.tar.gz三、搭建步骤（默认的python2.6.6）：1、jdk的安装tar zxf jdk-7u67-linux-x64.ta
原创
2015-09-20 09:49:32
1041阅读
# Hadoop的单机版配置和安装教程
## 1. 简介
在开始教你如何配置和安装Hadoop的单机版之前，我们先来了解一下什么是Hadoop。
Hadoop是一个用于大规模数据处理的开源框架，它提供了分布式存储和分布式处理能力。Hadoop的核心组件有HDFS（分布式文件系统）和MapReduce（分布式计算模型）。Hadoop的单机版可以在一台机器上模拟分布式环境，方便开发和测试。
##
原创
2023-08-28 11:52:18
358阅读
zookeeper 单机版安装cd zookeeper-3.4.8#创建数据存放目录mkdir data#创建日志存放目录mkdir logcd conf#修改配置文件cp zoo_sample.cfg ./zoo.cfgvim zoo.cfg tickTime=2000 initLimit=10 &nb
原创
2017-06-24 18:11:28
5904阅读
微软新一代 Windows 11 操作系统已于 2021 年 10 月 5 日正式发行，想尝鲜的小伙伴们可以按照此教程来进行“全新”安装，可最大避免由于“升级”安装而带来的未知问题。本教程图文并茂，几乎每一个步骤都有图示，适合小白用户。注：点击链接可直接下载相关软件（由于时间的过去，软件肯定会有更新，可以百度一下搜索最新版进行下载，恕不另行通知）。 图片内容仅供参考，详细操作以书面语为准。1. 前
准备工作系统安装环境：Linux CentOS 32bit系统。两台相同环境的Liunx虚拟机，Master IP：192.168.15.129，Slave IP：192.168.15.131。在进行单机上的Hadoop安装配置时，使用Master主机。两台主机中都配置完成了SSH无密码登录，以满足配置Hadoop集群时的要求。Linux系统环境下配置SSH无密码登录，详见：CentO
注意此文描述的方法是不需要依赖Hadoop的安装的，故不用单独安装hadoop此篇文章，会介绍单机模式和集群模式的环境搭建，读者可根据需要读取。以下命令都是在root用户下执行，如果是用普通用户登录，请切换到root用户，否则权限不够软件包jdk-8u151-linux-x64.tar.gz -- 自行搜索配置
scala-2.11.8.tgz
spark-2.2.0-bin-ha
首先：安装依赖包1， ZeroMQ 2.1.72， JZMQ3， Java4， Python5， Unzip这里只需要安装1,2就可
原创
2023-03-31 15:32:34
111阅读
一、下载安装 1、下载 https://www.apache.org/dyn/closer.lua/zookeeper/zookeeper-3.6.1/apache-zookeeper-3.6.1-bin.tar.gz 2、安装 tar -zxvf apache-zookeeper-3.6.1-bi ...
转载
2021-07-26 13:43:00
293阅读
2评论
Hadoop是最近非常流行的东东啦，但是乍一看都觉得是集群的东东，其实
转载
2013-09-02 18:30:00
71阅读
点赞
目录1. Hive安装部署2. Hive元数据配置到MySQL2.1. 拷贝驱动2.2. 配置Metastore到MySQL3. 初始化元数据库4. 启动Hive客户端并使用5. 使用元数据服务的方式访问 Hive6. 使用 JDBC 方式访问 Hive7. 编写hive一键脚本1. Hive安装部署1）上传安装包到服务器对应目录2）解压 apache-hi
