flyfish225的博客_python,Hadoop,Hbase,项目管理,自动化运维,MapReduce,Vmware,网络相关,操作系统,数据库

如何使用StreamSets从MySQL增量更新数据到Hive

如何使用StreamSets从MySQL增量更新数据到Hive标签（空格分隔）：大数据平台构建一：编写目的二：平台所用版本介绍三：配置步骤四：测试应用一：编写目的通过StreamSets实现数据采集，在实际生产中需要实时捕获MySQL、Oracle等其他数据源的变化数据（简称CDC）将变化数据实时的写入大数据平台的Hive、HDFS、HBase、Solr、Elasticserach等。该文将介绍使

CDH5.14.4

StreamSets

hive

hadoop

原创点赞0 阅读7867 收藏1 评论0 2018-12-19

在CDH5.14.4 中安装StreamSets与案例运行

在CDH5.14.4中安装StreamSets与案例运行标签（空格分隔）：大数据平台构建一：Streamset简介与系统环境介绍二：安装软件准备三：在CDH5.14.4集成使用StreamSets四：streamsets基本使用案例运行一：Streamset简介与系统环境介绍1.1:StreamSet简介StreamSets由Informatica前首席产品官GirishPancha和Cloude

大数据

CDH5.14.4

streamsets

原创点赞0 阅读4431 收藏0 评论0 2018-11-24

CentOS7.5 安装testlink 测试用例

CentOS7.5安装testlink测试用例标签（空测试用例格分隔）：运维系列一：testlink简介二：安装环境准备三：安装testlink一：testlink简介TestLink是基于web的测试用例管理系统，主要功能是测试用例的创建、管理和执行，并且还提供了一些简单的统计功能。TestLink用于进行测试过程中的管理，通过使用TestLink提供的功能，可以将测试过程从测试需求、测试设计、

测试用例

testlink

原创点赞1 阅读6316 收藏0 评论0 2018-08-10

gitlab 的 CI/CD 配置管理（二）

gitlab的CI/CD配置管理（二）标签（空格分隔）：运维系列一：gitlabCI/CD介绍二：配置gitlab的CI/CD的runner三：代码的MAVEN打包环境四：配置gitlab的CI文件五：发布项目一：gitlabCI/CD介绍1.1gitlabCI/CD概述Gitlab是常用的开源git代码管理工具之一，随着发展也推出了ci/cd解决方案．顾名思义具体来说ci/cd主要完成以下两个工

gitlab

ci/cd

管理

原创点赞1 阅读10000+ 收藏5 评论3 2018-08-09

gitlab 的介绍与安装配置（一）

gitlab的介绍与安装配置（一）标签（空格分隔）：运维系列一：Gitlab概述二：GitLab和GitHub的区别三：搭建GitLab平台与使用一：Gitlab概述GitLab概述：是一个利用RubyonRails开发的开源应用程序，实现一个自托管的Git项目仓库，可通过Web界面进行访问公开的或者私人项目。RubyonRails是一个可以使你开发、部署、维护web应用程序变得简单的框架。Git

gitlab

配置管理

原创点赞2 阅读10000+ 收藏3 评论2 2018-07-17

kubernetes 容器介绍与安装（一）

kubernetes容器介绍与安装（一）标签（空格分隔）：kubernetes系列一：Kubernetes介绍与功能二：kubernetes基本对象概念三：kubernetes部署环境准备　四：kubernetes集群部署五：kubernetes运行一个测试案例六：kubernetesUI的配置一：Kubernetes介绍与功能1.1:kubernetes介绍Kubernetes是Google在2

docker

kubernetes

容器集群

原创点赞4 阅读10000+ 收藏3 评论1 2018-07-12

cdh5.14.2中集成安装kylin与使用测试

cdh5.14.2中集成安装kylin与使用测试标签（空格分隔）：大数据平台构建一：kylin简介二：安装配置kylin三：kylin运行实例一：kylin简介ApacheKylin™是一个开源的分布式分析引擎，提供Hadoop/Spark之上的SQL查询接口及多维分析（OLAP）能力以支持超大规模数据，最初由eBayInc.开发并贡献至开源社区。它能在亚秒内查询巨大的Hive表。kylin软件下

大数据

CDH5.14.2

hadoop

kylin

原创点赞4 阅读10000+ 收藏2 评论1 2018-06-11

在CDH5.14.2 中启用kudu的配置与验证

在CDH5.14.2中启用kudu的配置标签（空格分隔）：大数据平台构建一：系统平台介绍二：安装kudu的集成一：系统平台介绍1.1.关于kudu的介绍Kudu是Cloudera开源的新型列式存储系统，是ApacheHadoop生态圈的新成员之一(incubating)，专门为了对快速变化的数据进行快速的分析，填补了以往Hadoop存储层的空缺。　　Hadoop生态系统有很多组件，每一个组件有不同

大数据平台

hadoop

CDH

kudu

原创点赞0 阅读10000+ 收藏0 评论3 2018-06-11

在CDH5.14.2中安装Phoenix与使用

在CDH5.14.2中安装Phoenix与使用标签（空格分隔）：大数据平台构建一：安装及配置Phoenix二：Phoenix的基本操作三：使用Phoenixbulkload数据到HBase四：使用Phoenix从HBase中导出数据到HDFS一：安装及配置Phoenix1.0：phoienx的介绍Phoenix中文翻译为凤凰,其最早是Salesforce的一个开源项目，Salesforce背景是一

大数据技术

CDH5.14.2

phoenix

原创点赞1 阅读10000+ 收藏1 评论2 2018-06-10

CDH5.14.2 的Navigator介绍与安装

大数据

cdh

Navigator

原创点赞1 阅读10000+ 收藏0 评论1 2018-06-10

大数据平台CDH5.14.2 的安装配置

CDH

hadoop

cdh5.14.2

大数据CDH

原创点赞1 阅读10000+ 收藏1 评论0 2018-06-10

hdp 2.6.4 扩容增加数据节点

hdp 2.6.4 增加数据节点

hdp

hadoop

增加节点

原创点赞2 阅读6185 收藏1 评论0 2018-05-24

大数据平台HDP-2.6.4安装与配置

大数据平台

HDP

原创点赞2 阅读10000+ 收藏1 评论1 2018-05-24

Openstack 云计算（一）： kvm 虚拟机配置

openstack

kvm

虚拟化

原创点赞1 阅读10000+ 收藏2 评论0 2018-05-24

CDH5.12.0 中扩容增加计算节点

CDH

扩容

原创点赞1 阅读10000+ 收藏0 评论0 2018-05-19

CDH5.12.0 如何升级到Spark2.0 版本

CDH5.12.0 升级SPARK2.0

CDH

spark

原创点赞0 阅读9262 收藏0 评论1 2018-05-18

关于CDH6的一些介绍

cdh6 发布的一些介绍

cdh6

介绍

hadoop

cdh

原创点赞2 阅读10000+ 收藏0 评论1 2018-05-18

docker 学习笔记（二）： Docker的项目案例

docker 的项目案例

docker

compose

CI/CI

jenkins

原创点赞1 阅读6657 收藏1 评论1 2018-05-13

docker 学习笔记（一）Docker的介绍与安装使用

docker的使用介绍

docker

容器

虚拟化

原创点赞2 阅读3631 收藏0 评论0 2018-05-13

CentOS 6.4x64 yum 源服务器配置

yum

linux

ftp

原创点赞1 阅读1081 收藏0 评论0 2018-05-09

Spark 的Core深入（二）

Spark 的Core深入

hadoop

spark

SPARK

RDD

原创点赞1 阅读2188 收藏0 评论0 2018-05-08

hadoop的安全系列

hadoop 的安全系列

hadoop

kerberos

原创点赞1 阅读1900 收藏0 评论0 2018-05-08

Spark初识入门Core （一）

spark的安装与配置与初识

hadoop

spark

SparkRDD

原创点赞1 阅读7143 收藏1 评论0 2018-05-07

Spark的介绍：前世今生

spark的介绍

spark

hadoop

流计算

原创点赞1 阅读4222 收藏1 评论0 2018-05-07

CentOS7 构建httpd+svn+ifsvnadmin配置

svn httpd ifsvnadmin

http

svn

ifsvnadmin

原创点赞1 阅读5478 收藏1 评论0 2018-05-05

storm 流式计算框架

大数据平台storm系列

大数据

storm

流式计算

原创点赞1 阅读10000+ 收藏0 评论0 2018-04-12

hbase 表的设计与其它大数据框架的集成

大数据平台hbase 系列

大数据

hadoop

hbase

数据框架

集成

原创点赞3 阅读4809 收藏2 评论0 2018-04-12

hbase 数据库深入使用与相关数据的加载

大数据平台hbase 系列

大数据

hadoop

hbase

原创点赞1 阅读3314 收藏0 评论0 2018-04-12

hbase 数据库简介安装与常用命令的使用

大数据平台hbase 系列

大数据

hadoop

hbase

数据库

原创点赞2 阅读10000+ 收藏1 评论0 2018-04-12

flume 监控hive日志文件

大数据日志抽取框架flume

大数据

hadoop

flume

日志抽取

原创点赞1 阅读4238 收藏0 评论0 2018-04-12

官方博客	意见反馈	了解我们	全部文章
在线客服	网站地图	热门标签

51CTO博客

flyfish