51CTO博客>热门标签>带您了解大数据

带您了解大数据

全部文章近期文章热门文章标签简介

【带您了解大数据】内容共 240 条

原创 大数据-sqoop数据迁移

4. sqoop数据迁移 4.1 概述sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。导入数据：MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统；导出数据：从Hadoop的文...

sqoop数据迁移

sqoop

mysql

数据库

hive

阅读 31 评论 0 点赞 0

wx5d0241bb88268 79 天前
原创 大数据-sqoop数据迁移

4. sqoop数据迁移 4.1 概述 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。导入数据：MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统；导...

sqoop数据迁移

sqoop

mysql

数据库

hive

阅读 392 评论 0 点赞 0

wx5d0241bb88268 277 天前
原创 大数据与传统数据

小编说：在这个人人都说大数据的时代，许多人对大数据的印象只是停留在仰望的阶段，其实大数据没人们说得那么神奇、玄乎或者是无所不能，今天我们就以传统数据作为比对，看看大数据究竟有什么特点让其处于时代的浪潮...

其他

大数据

阅读 784 评论 0 点赞 0

博文视点 1944 天前
原创 大数据常用数据抽取

目录 1. BulkLoad 介绍 1.1. 为什么要抽取 1.2. 为什么使用 BulkLoad 2. 从 Hive 中抽取数据到 HBase 2.1. 准备数据 2.1.1. 将数据导入到 MySQL 2.1.2. 将数据导入到 Hive 2.2. 工程配置...

hive

数据

spark

mysql

maven

阅读 169 评论 0 点赞 0

程序员老陆 306 天前
原创数据分层方法--大数据

一、概述数据分层是数据仓库设计中十分重要的一个环节，优秀的分层设计能够让整个数据体系更易理解和使用。二、数据分层作为一名数据的规划者，我们肯定希望自已的数据能够有秩序地流转，数据的整个生命周期能够...

面试

阅读 705 评论 0 点赞 0

wx5b58976cc0a6f 321 天前
原创云小课｜DSC帮您管数据，保障您的云上数据安全

摘要：华为数据安全中心，积累华为云多年数据经验，整合云上各类数据源，搭载数据安全黑科技，通过深度行为识别引擎，助您轻松管理云上数据。本文分享自华为云社区《云小课 | DSC帮您管数据，保障您的云上数据安全...

DSC

阅读 340 评论 0 点赞 0

华为云开发者社区 362 天前
原创云小课｜DSC 帮您管数据，保障您的云上数据安全

摘要：华为数据安全中心，积累华为云多年数据经验，整合云上各类数据源，搭载数据安全黑科技，通过深度行为识别引擎，助您轻松管理云上数据。本文分享自华为云社区《云小课 |DSC帮您管数据，保障您的云上数据安全》...

华为云

DSC

数据安全中心

数据安全

云上数据

阅读 865 评论 0 点赞 1

华为云开发者社区 366 天前
转载数据灾难就在您的身边

数据灾难，就在我们身边 2007年6月15日，西昌，天气不错，某商业公司的系统管理员王主任，突然接到公司电话，总部商业系统核心服务器的硬盘突然亮起了警示灯，有两块硬盘点显示掉线，操作系统不能正常启动，所有业务...

职场

数据恢复

休闲

数据丢失

数据灾难

阅读 763 评论 1 点赞 0

花无影 5385 天前
转载 大数据开发-深入理解大数据Lambda架构

1.大数据处理的挑战缕一缕it的发展，第一阶段是各大系统各大平台的出现，解决的是线下搬到线上的效率问题，而下一个阶段是数据时代，处理这些各大平台积累的数据，积累的数据，一般比较大，大数据做的是什么，...

大数据

Lambda架构

阅读 129 评论 2 点赞 0

mob604756f16c66 346 天前
原创蔡先生论道大数据十九：王羲之与大数据

2013年德勤公司发布了一份《2013年艺术品在线交易报告》，显示艺术品投资交易方式由线下慢慢朝着线上交易的方式转变,过去几年至少有80%的藏家尝试过在线购买艺术品，这一趋势还在不断上升。对于艺术品电商来说是个好...

算法

数据挖掘

统计分析

阅读 640 评论 0 点赞 0

caimin1977 2830 天前
原创 大数据导论之为何需要引入大数据

一、引言　　最近各种客户咨询项目中，往往涉及大数据引入必要性和价值意义的深层次挖掘，客户有数据，有平台，但是不知到底要不要上大数据，为何要上大数据和大数据可以带来哪些价值和意义。本文关于大数据的必要性...

大数据

数据

大数据时代

阅读 0 评论 0 点赞 0

数据饕餮 18 天前
转载 大数据-linux之大数据-shell位置参数变量

一、提供一个可执行权限：

可执行

数据

阅读 78 评论 2 点赞 0

mb5fe55b6d43deb 223 天前
转载 大数据-linux之大数据-shell环境变量

一、在/etc/profile中：刷新：查看：在另一个shell程序中使用：多行注释： :<<! !

多行注释

数据

阅读 98 评论 2 点赞 0

mb5fe55b6d43deb 223 天前
原创 大数据笔记（一）：大数据启蒙与入门知识

大数据启蒙与入门知识一、前言博主语录：一文精讲一个知识点，多了你记不住，一句废话都没有经典语录：那日看雪，你从未看我，我从未看雪二、千里之行，始于足下启蒙很重要分治思想单机处理大数据问题集群分布式处...

hadoop

大数据

apache

阅读 153 评论 0 点赞 1

Lansonli 13 天前
原创蔡先生论道大数据之一 , 大数据由来

我记得早在2001年，Gartner公司的一份研究报告首次出现“大数据（Big Data）”概念的提法。但是到今天业内对“大数据”一词的定义说法不一，但越来越多的研究机构和网络媒体开始关注它。大...

移动互联网

云计算

信息服务

阅读 850 评论 0 点赞 0

caimin1977 2883 天前
转载 大数据-linux之大数据-shell预定义变量

一、最后卡住了是因为在后台执行的myShell.sh脚本。

后台执行

数据

阅读 83 评论 2 点赞 0

mb5fe55b6d43deb 223 天前
转载云大数据实战记录-大数据推荐

前言 WHY 云：为什么我们须要云。大数据时代我们面对两个问题，一个是大数据的存储。一个是大数据的计算。由于数据量过大，在单个终端上运行效率过差，所以人们用云来解决这两个问题。 WHAT IS 云：云...

特征值

信息熵

数据

决策树

大数据

阅读 110 评论 2 点赞 0

mob604756fc844f 2500 天前
转载 大数据-linux之大数据-shell运算符

一、二、第二种方式推荐使用使用时运算符两边要有空格：

运算符

其他

阅读 117 评论 2 点赞 0

mob604756f953bb 223 天前
转载 大数据-linux之大数据-shell流程控制

一、二、三、案例一：就是把$*的这些参数值交给i,然后输出。将参数值遍历输出。第二种方式就是将参数独立输出。案例二：四、 ...

其他

阅读 101 评论 2 点赞 0

mob604756f953bb 223 天前
转载政务大数据系列10：政务大数据的运营

政务是个大市场，阿里、腾讯、电信、华为都在赔本赚吆喝。本文作者宇同学是资深从业人士，研发总监，他会写一系列文章来阐述政务云全景。前面九篇分别深入阐述：政务大数据的本质：《浅谈...

政务大数据的运营

阅读 156 评论 0 点赞 0

大数据和云计算技术 313 天前