郑重声明:漫画人物和故事情节均是原创,未经同意禁止任何形式的转载,侵权将进入法律程序。大佬除外。

欢迎大家转发文章,谢谢!

【生活现场】从电影字幕到hive工作原理解析_生活

小史是一个非科班的程序员,虽然学的是电子专业,但是通过自己的努力成功通过了面试,现在要开始迎接新生活了。

对小史面试情况感兴趣的同学可以观看

【生活现场】从电影字幕到hive工作原理解析_生活_02

找到工作到正式上班之间的这段时间总是惬意的,小史决定利用这段时间把一些经典电影重温一下。

【生活现场】从电影字幕到hive工作原理解析_生活_03

【生活现场】从电影字幕到hive工作原理解析_生活_04

【生活现场】从电影字幕到hive工作原理解析_生活_05

【生活现场】从电影字幕到hive工作原理解析_生活_06

【生活现场】从电影字幕到hive工作原理解析_生活_07

【生活现场】从电影字幕到hive工作原理解析_生活_08

【生活现场】从电影字幕到hive工作原理解析_生活_09

【生活现场】从电影字幕到hive工作原理解析_生活_10

【生活现场】从电影字幕到hive工作原理解析_生活_11

【hive简介】

【生活现场】从电影字幕到hive工作原理解析_生活_12

【生活现场】从电影字幕到hive工作原理解析_生活_13

【生活现场】从电影字幕到hive工作原理解析_生活_14

吕老师:这就要说到之前提到的OLTPOLAP的概念了,数据仓库是用来做OLAP的,注重查询分析。并且数据仓库的数据量一般比数据库要大一个数量级。

(注:

【生活现场】从电影字幕到hive工作原理解析_生活_15

【生活现场】从电影字幕到hive工作原理解析_生活_16

【生活现场】从电影字幕到hive工作原理解析_生活_17

【生活现场】从电影字幕到hive工作原理解析_生活_18

【生活现场】从电影字幕到hive工作原理解析_生活_19

【生活现场】从电影字幕到hive工作原理解析_生活_20

【生活现场】从电影字幕到hive工作原理解析_生活_21

【hive工作原理】

【生活现场】从电影字幕到hive工作原理解析_生活_22

【生活现场】从电影字幕到hive工作原理解析_生活_23

【生活现场】从电影字幕到hive工作原理解析_生活_24

【生活现场】从电影字幕到hive工作原理解析_生活_25

【生活现场】从电影字幕到hive工作原理解析_生活_26

【生活现场】从电影字幕到hive工作原理解析_生活_27

【生活现场】从电影字幕到hive工作原理解析_生活_28

【生活现场】从电影字幕到hive工作原理解析_生活_29

【生活现场】从电影字幕到hive工作原理解析_生活_30

【生活现场】从电影字幕到hive工作原理解析_生活_31

【生活现场】从电影字幕到hive工作原理解析_生活_32

【生活现场】从电影字幕到hive工作原理解析_生活_33

【生活现场】从电影字幕到hive工作原理解析_生活_34

【生活现场】从电影字幕到hive工作原理解析_生活_35

【生活现场】从电影字幕到hive工作原理解析_生活_36

【生活现场】从电影字幕到hive工作原理解析_生活_37

【生活现场】从电影字幕到hive工作原理解析_生活_38

【生活现场】从电影字幕到hive工作原理解析_生活_39

【生活现场】从电影字幕到hive工作原理解析_生活_40

【生活现场】从电影字幕到hive工作原理解析_生活_41

【数据迁移sqoop】

【生活现场】从电影字幕到hive工作原理解析_生活_42

【生活现场】从电影字幕到hive工作原理解析_生活_43

【生活现场】从电影字幕到hive工作原理解析_生活_44

【生活现场】从电影字幕到hive工作原理解析_生活_45

【生活现场】从电影字幕到hive工作原理解析_生活_46

【生活现场】从电影字幕到hive工作原理解析_生活_47

【生活现场】从电影字幕到hive工作原理解析_生活_48

【生活现场】从电影字幕到hive工作原理解析_生活_49

【hive优缺点】

【生活现场】从电影字幕到hive工作原理解析_生活_50

【生活现场】从电影字幕到hive工作原理解析_生活_51

小史:嗯,刚刚我就一直在思考这个问题了,hive的优点很明显,它提供了一种sql的方式查询大数据,上手简单,减少了开发人员的学习成本。

【生活现场】从电影字幕到hive工作原理解析_生活_52

【生活现场】从电影字幕到hive工作原理解析_生活_53

【生活现场】从电影字幕到hive工作原理解析_生活_54

【生活现场】从电影字幕到hive工作原理解析_生活_55

【生活现场】从电影字幕到hive工作原理解析_生活_56

【生活现场】从电影字幕到hive工作原理解析_生活_57

【生活现场】从电影字幕到hive工作原理解析_生活_58

【生活现场】从电影字幕到hive工作原理解析_生活_59

【生活现场】从电影字幕到hive工作原理解析_生活_60

【笔记】

在下载电影的过程中,小史顺便记下了今天的笔记。

1hive是一个数据仓库,存储大数据,主要用来做OLAP分析。

2hive底层是hdfs,它提供了sql来查询数据。

3hive的原理是将sql翻译成map-reduce任务。

4、数据的导入导出可以用工具sqoop,原理也是把命令翻译成map-reduce任务。


生活现场是互联网侦察推出的现场系列中的另一个板块,旨在通过生活中的场景,来解释大数据微服务技术中的基本原理,希望对大家学习技术原理有所帮助。

往期回顾

【生活现场】从电影字幕到hive工作原理解析_生活_61