hfhywj的博客_51CTO博客

鸿蒙开发者社区

公众号矩阵

移动端

视频课免费课排行榜短视频直播课软考学堂

全部课程软考信创认证华为认证厂商认证 IT技术 PMP项目管理免费题库

在线学习

文章资源问答课堂专栏直播

51CTO

鸿蒙开发者社区

51CTO技术栈

51CTO官微

51CTO学堂

51CTO博客

CTO训练营

鸿蒙开发者社区订阅号

51CTO软考

51CTO学堂APP

51CTO学堂企业版APP

鸿蒙开发者社区视频号

51CTO软考题库

51CTO博客

首页
关注
排行榜
精品课程
免费资料
软考题库

科目全、试题精、讲解专业，扫码免费刷

搜索历史清空

热门搜索

查看【】的结果
写文章
创作中心
登录注册

Tachyon基本使用10-----Running Shark on Tachyon

一、安装Hive1.下载并解压Hive[root@node1 soft]# tar -zxf apache-hive-0.13.1-bin.tar.gz -C /usr/local/ [root@node1 soft]# ln -s /usr/local/apache-hive-0.13.1-bin

Hadoop

Spark

Tachyon

原创 2014-10-15 11:02:07 995 阅读

Tachyon基本使用09-----Running Spark on Tachyon

一、配置scala环境1.实验环境Node1 192.168.1.1 master Node2 192.168.1.2 worker Node3

Hadoop

Spark

Tachyon

原创 2014-10-15 10:43:04 1144 阅读 1点赞 1评论

Tachyon基本使用08-----Running Hadoop MapReduce on Tachyon

一、修改Hadoop配置文件1.修改core-site.xml文件添加如下属性，让MapReduce作业可以使用Tachyon文件系统作为输入和输出<property> <name>fs.tachyon.impl</name> <value>tachyon.hadoop.TFS</value> </prope

Hadoop

Spark

Tachyon

原创 2014-10-15 10:25:10 976 阅读

Tachyon基本使用07-----Tachyon集群容错2

四、配置Master容错1.修改Tachyon配置[root@node1 conf]# pwd /usr/local/tachyon/conf [root@node1 conf]# tailtachyon-env.sh JAVA_HOME=/usr/java/default exportTACHYON_MASTER_ADDRESS=no

Hadoop

Spark

Tachyon

原创 2014-10-15 10:16:00 908 阅读 1点赞 1评论

Tachyon基本使用07-----Tachyon集群容错1

一、安装zookeeper集群1.下载并解压zookeeper[root@node1 soft]# tar -zxf zookeeper-3.4.5.tar.gz -C /usr/local/ [root@node1 soft]# ln -s /usr/local/zookeeper-3.4.5/&

Hadoop

Spark

Tachyon

原创 2014-10-15 10:02:21 822 阅读

Tachyon基本使用06-----Tachyon 命令行接口

一、tachyon命令介绍# tachyon Usage: tachyon COMMAND where COMMAND is one of: format [-s] 格式化For

Hadoop

Spark

Tachyon

原创 2014-10-15 09:29:24 948 阅读

Tachyon基本使用05-----Tachyon集群模式安装

一、环境配置1.集群环境主机名 IP &nb

Hadoop

Spark

Tachyon

原创 2014-10-14 17:45:58 1295 阅读

Tachyon基本使用04-----Tachyon配置项

一、Tachyon配置说明Tachyon 配置参数分为4类：Master,Worker, Common (Master and Worker), and User configurations。环境变量配置文件在$TACHYON_HOME/conf/tachyon-env.sh，这些变量将会被TACHYON_JAVA_OPTS调用，这个文件的配置模版为$TACHYON_HOME/conf/tach

Hadoop

Spark

Tachyon

原创 2014-10-14 17:30:27 848 阅读

Tachyon基本使用03-----Tachyon Web UI

一、主页描述了当前系统状态信息，包括Tachyon汇总状态、集群汇总状态、和节点汇总状态。二、系统配置查看页面三、文件系统查看页面四、查看在内存中的文件页面

Hadoop

Spark

Tachyon

原创 2014-10-14 17:07:34 657 阅读

Tachyon基本使用02-----Tachyon本地模式安装

一、配置系统环境1.清除默认防火墙规则# service iptables save iptables：将防火墙规则保存到 /etc/sysconfig/iptables： [确定]2.关闭Selinux# cat /etc/sysconfig/selinux |grep

Hadoop

Spark

Tachyon

原创 2014-10-14 16:27:27 771 阅读

Tachyon基本使用01-----Tachyon简介

一、Tachyon介绍 Tachyon是一个高容错的分布式文件系统，允许文件以内存的速度在集群框架中进行可靠的共享，就像Spark和 MapReduce那样。通过利用信息继承，内存侵入，Tachyon获得了高性能。Tachyon工作集文件缓存在内存中，并且让不同的Jobs/Queries以及框架都能内存

Hadoop

Spark

Tachyon

原创 2014-10-14 16:13:43 1190 阅读

欢迎