51CTO博客>热门标签>大数据平台云平台

大数据平台云平台

全部文章近期文章热门文章标签简介

【大数据平台云平台】内容共 240 条

原创 大数据平台规划

背景1.“云大开物”，四大热门信息技术1.1 业务的发展越来越受到技术进步的影响。业务创新离不开技术创新。技术为业务服务？2.大数据技术栈全景：分布式编程分布式文件系统列数据库(HBase、Cassandra、BigTable)柱数...

大数据

平台

阅读 2345 评论 0 点赞 1

勤智运维 1577 天前
原创免费大数据分析云平台有哪些?

昨天（5月28号）由社科文献出版社初版的《大数据蓝皮书：中国大数据发展报告No.2》正式发布了。以“数化万物智在融合”为主题的中国国际大数据产业博览会也京举行中。基本可以预见，在接下来的一段时期内关于大数据...

免费

大数据

分析

云平台

阅读 624 评论 0 点赞 0

adnb34g 1449 天前
原创 CDH大数据平台搭建

Hadoop是apache旗下的一套开源软件平台, 主要对海量数据进行分布式处理。本次部署，计划使用5台服务器，服务器磁盘规划如下：分区挂载完成以后，使用root用户执行对目录/data授权。每台服务器都执行此命令。 chmod...

Hadoop

CDH大数据平台搭建

CDH

大数据平台搭建

root用户

阅读 42 评论 0 点赞 0

大数据同盟会 126 天前
转载 GreenPlum 大数据平台--监控

数据库状态监控活动活动过程纠正措施列出当前状态为down的Segment。如果有任何行被返回，就会生成一个警告或者告警。推荐频率：每5到10分钟重要度： IMPORTANT在postgres数据库中运行下例查询：SELECT * FROM gp_seg...

数据库

数据

修复脚本

阅读 23 评论 0 点赞 0

kingle_work 118 天前
转载 HDP 大数据平台搭建

一、概述Apache Ambari是一个基于Web的支持Apache Hadoop集群的供应、管理和监控的开源工具，Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等。提供Web UI进...

ambari

centos

linux

mysql

hadoop

阅读 103 评论 2 点赞 0

mb5fe559b5073e8 1001 天前
原创 大数据平台CDH搭建

一、概述Cloudera版本（Cloudera’s Distribution Including Apache Hadoop，简称“CDH”），基于Web的用户界面,支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop,简化了大数据平台...

Hadoop

cloudera

java

mysql

阅读 61 评论 0 点赞 0

KaliArch 专栏作者 126 天前
原创 CDH大数据平台搭建

Hadoop是apache旗下的一套开源软件平台, 主要对海量数据进行分布式处理。本次部署，计划使用5台服务器，服务器磁盘规划如下：分区挂载完成以后，使用root用户执行对目录/data授权。每台服务器都执行此命令。 chmod...

Hadoop

CDH大数据平台搭建

CDH

大数据平台搭建

root用户

阅读 3 评论 0 点赞 0

大数据同盟会 27 天前
转载 CDH 大数据平台搭建

一、概述Cloudera版本（Cloudera’s Distribution Including Apache Hadoop，简称“CDH”），基于Web的用户界面,支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop,简化了大数据平台...

cloudera

java

mysql

hadoop

h5

阅读 70 评论 2 点赞 0

mob604757006a49 1001 天前
翻译 大数据平台架构

[图片]![](https://s4.51cto.com/images/blog/202101/26/614a4dff832d8020c732b646c3d39cf2.png?x-oss-process=image/watermark,size_16,text_QDUxQ1RP5Y2a5a6i,color_FFFFFF,t_100,g_se,x_10,y_10,shadow_90,type_Z...

大数据 hadoop

阅读 518 评论 0 点赞 0

shids2008 478 天前
转载 CDH大数据平台搭建

分区挂载完成以后，使用root用户执行对目录/data授权。每台服务器都执行此命令。chmod 777 -R /data一、基础运行平台部署包说明平台大数据部署包共提供cm5,cdh,Redhat三个程序部署包。其中c...

root用户

服务器

hadoop

mysql

java

阅读 87 评论 2 点赞 0

mob604756e85b28 281 天前
转载 GreenPlum 大数据平台--介绍

一,GreenPlum　　01,介绍:　　Greenplum是一种基于PostgreSQL的分布式数据库，其采用shared-nothing架构，主机、操作系统、内存、存储都是自我控制的，不存在共享。　　官方文档:>>>--大概内容如下Greenplu...

数据库

数据

postgresql

阅读 35 评论 0 点赞 0

kingle_work 114 天前
原创 GreenPlum 大数据平台--安装

1. 环境准备　　01, 安装包准备:　　　　Greenplum : >>>>链接地址　　　　Pgadmin客户端 : >>>链接地址　　　　greenplum-cc-web监控: >>>>链接地址　　02,节点说明服务器ip...

bash

初始化

sed

阅读 394 评论 0 点赞 0

kingle_work 119 天前
原创 大数据平台架构

以Spark作为计算框架的架构

大数据

大数据平台

大数据架构图

spark

其他

阅读 155 评论 0 点赞 0

訾零LL 261 天前
转载 大数据平台架构

前面提到各种大数据技术的原理与架构，大数据计算通过将可执行的代码分发到大规模的服务器集群上进行分布式计算，以处理大规模的数据，即所谓的移动计算比移动数据更划算。但是这样的计算方式必然不会很快，即使一个...

数据

大数据

hdfs

数据库

spark

阅读 94 评论 2 点赞 0

mb5fed73533dfa9 218 天前
原创 hadoop大数据研发平台

一．开发平台： •Hadoop是Apache软件基金会旗下的一个开源分布式计算平台 •以分布式文件系统（Hadoop Distributed File Syste, HDFS）和MapReduce为核心的Hadoop为用户提供了系统底层细节透明分布式基础架构 •HDF...

Hadoop

平台

大数据

阅读 656 评论 0 点赞 0

北京云港 1441 天前
原创 大数据常用调度平台

目录 1. 项目结构 1.1. 项目介绍 1.2. 项目结构 2. Oozie 介绍 2.1. 需求 2.2. 可选的方式 2.2.1. Crontab 2.2.2. Oozie 2.3. Oozie 和竞品的对比 3. Oozie 组件 3.1. Workflow 3.2. Coo...

spark

big data

mysql

hdfs

jar

阅读 193 评论 0 点赞 0

程序员老陆 295 天前
转载管中窥豹：腾讯大数据平台

‍‍‍‍腾讯有中国最全的社交数据，面对一个数据金矿，腾讯不可能坐视不理，腾讯基于hadoop研究了自己的大数据平台，最大的一个集群规模超过5600台。本文简单分析下腾讯的大数据平台的技术特点。 ‍‍ 下面这个图是...

大数据

腾讯

阅读 277 评论 0 点赞 0

大数据和云计算技术 293 天前
原创 ambari大数据平台搭建

https://www.cnblogs.com/zlslch/p/6629251.html

ambari

阅读 919 评论 0 点赞 0

点解甘假 589 天前
原创 大数据平台架构

大数据平台架构基于HBase和Spark构建企业级数据处理平台 1.1 一站式数据处理平台架构 1.2 典型业务场景 1.2.1 爬虫+搜索引擎 1.2.2 大数据风控系统 1.2.3 构建数据仓库(推荐、风控) ...

架构基础

结构

架构流程

架构管理

阅读 552 评论 0 点赞 0

爱是与世界平行 348 天前