如何跟一个非相关性的人解释你是做大数据的,你是做大数据的哪一部分工作,从求职者角度,如何从jd描述中估摸大概率做哪一块,从猎头角度,如何从一份简历中看出你更匹配哪个jd1.相关技术大数据开发的技术名词无非是下面几种,Hadoop,Hive,Spark,Kafka,Sqoop,Flink,Oozie,Hbase,hue但是大数据架构根据每个厂的基础建设不同,可能会有不同的方案,但是总的流程是大致一致
转载
2021-04-07 13:47:20
796阅读
2评论
从2月28号开始报名大数据微专业,到4月29号看完最后模块的视频。两个月的时间,收获非常大。早在上班的时候就对大数据的技术非常好奇,后来考了研,终于有时间和机会来系统地学习。由于我不是cs本科出身,在报名这门课之前,我自己学习了很多前置知识,比如linux,数据库,java,python。我能在比较短的时间内完成这门课的学习主要得归功于前置知识的掌握
原创
2018-05-15 10:41:57
823阅读
点赞
写了几年代码,看到这些年大数据,AI闹得火热火热,也想系统学习下大数据方面的东西,给自己充电一下。其实随着IT技术的发展,我们行业(地理信息)也已经开始拥抱大数据了。越来越多的带有位置的非结构化的数据需要处理,需要进一步挖掘。好了,废话不多说了。下面开始分享下,学习大数据这门过程中的一些心得。其实,大数据这门课,学起来还是得要有些知识储备的,比如最基本的linux操作,以及操作hive以及mysq
原创
2018-01-09 11:24:38
2029阅读
点赞
4评论
大数据是个铺天盖地的词,而谈论大数据又不可避免地要提到Hadoop,Hadoop到底是什么玩意,以及有何功用。 Hadoop是Apache软件基金会管理的开源软件平台,但Hadoop到底是什么呢?简单来说,Hadoop是在分布式服务器集群上存储海量数据并运行分布式分析应用的一种方法。Hadoop被设计成一种非常“鲁棒”的系统,即使某台服务器甚至集群宕机了,运行其上的大数据分析应用也不会中断。此外H
转载
2023-07-20 17:53:41
0阅读
随着各行各业的数据量快速增长,无论是从对数据的存储、分析、处理和挖掘等方面提出了越来越高的要求。IT行业正在逐渐向“DT”行业转变,未来是以数据为驱动的。所以我认为大数据是未来一个主流方向,了解和学习大数据对我们以后的工作和生活都有一定帮助。 近期我个人学习了大数据工程师微职位这门课,并且已经通过了所有的考核。下面切入正题,分享一下我的学习心得
原创
2017-09-05 22:25:05
1487阅读
点赞
1评论
随着各行各业的数据量快速增长,无论是从对数据的存储、分析、处理和挖掘等方面提出了越来越高的要求。IT行业正在逐渐向“DT”行业转变,未来是以数据为驱动的。所以我认为大数据是未来一个主流方向,了解和学习大数据对我们以后的工作和生活都有一定帮助。 近期我个人学习了大数据工程师微职位这门课,并且已经通过了所有的考核。下面切入正题,分享一下我的学习心得,因为篇幅关系,不涉及具体知
转载
2017-12-21 16:51:14
10阅读
这是大数据入门常识第二篇,主要讨论大数据工作的方向问题。第一篇没看的同学可
原创
2023-01-26 13:34:28
141阅读
大数据团队必须设置的五种职位作者:chszs,转载需注明。博客主页:http://blog.csdn.net/chszs麦肯锡认为,大数据团队必须有五种职位:1)数据卫生员(Data Hygienists) - 这些人,确保数据总是干净的、准确的。2)数据探索者(Data Explorers) - 这些人在大数据项目找到你真正需要的数据。3)企业解决方案架构师(Business Solution Architects) - 这些人把收集的数据组织在一起,以便用于分析,他们负责设计数据的结构,以确保数据可以有效地供所有用户检索,有些数据的访问需要数分钟、甚至数小时,例如,需要每分钟或每小时使更新
转载
2013-07-28 21:59:00
132阅读
2评论
大数据团队必须设置的五种职位作者:chszs,转载需注明。博客主页:
原创
2013-07-27 18:04:38
26阅读
大数据团队必须设置的五种职位作者:chszs,转载需注明。博客主页:http://blog..net/chszs麦肯锡认为,大数据团队必须有五种职位:1)数据卫生员(Data Hygienists) - 这些人,确保数据总是干净的、准确的。2)数据探索者(Data Explorers) - 这些人在大数据项目找到你真正需要的数据。
转载
2013-07-27 20:23:00
61阅读
通过采集招聘网站大数据职位信息、利用数据清洗、数据分析、jieba分词、数据挖掘完成整体项目的开发工作。任务包含爬取招聘网站大数据职位信息、使用BeautifulSoup清洗职位信息网页、使用PySpark对智联
原创
2021-12-28 17:24:17
842阅读
大家好,是我大数据工程师班级学员小陈,以下是我学习课程的一些经验分享,个人经验仅供参考。大数据课程的安排由浅入深,从相关的java语言入门到spark源码、spark ml等机器学习相关内容,都是一环扣一环,安排得非常合理。Java相关的课程是李兴华老师的课程,但看的内容不是非常多,还是结合《java从入门到精通》这本书,慢慢学的。后面大数据课程把前面的李兴华老师的内容更换为汤老师的讲解java课
转载
2021-02-02 16:15:46
214阅读
全网最详细的大数据ELK文章系列,强烈建议收藏加关注!新文章都已经列出历史文章目录,帮助大家回顾前面的知识重点。目录Elasticsearch编程一、添加职位数据1、初始化客户端连接2、实现关闭客户端连接3、编写代码实现新增职位数据
原创
2022-05-09 12:39:09
142阅读
本文翻译自:9 Must-Have Skills to Land Top Big Data Jobs in 2015 by datanami (datanami 是著名的大数据网站)作者:@善良的右行 from NLPJob翻译小组转载请注明作者和出处,本文地址: http://blog.nlpjob.com/?p=904The secret is out,
转载
精选
2015-04-27 11:38:52
502阅读
全网最详细的大数据ELK文章系列,强烈建议收藏加关注!新文章都已经列出历史文章目录,帮助大家回顾前面的知识重点。目录职位查询案例一、查询职位索引库中的一条数据二、将SQL转换为DSL三、职位scroll分页查询1、第一次查询2、第二次查询
原创
2022-05-09 12:37:44
146阅读
在互联网盛行的今天,能够预测未来需要依靠更多数据支持,从数据的趋势和分析中,就可以把未来的发展动向掌握得淋漓尽致。在大数据背景之下,精通大数据的专业人才将成为企业最重要的业务角色,大数据从业人员薪酬持续增长,人才缺口巨大。最近在回答粉丝问题中,我发现一个问题:很多人对于大数据的职位体系不了解,一些对于想入门与大数据的人一直处于迷茫阶段,不知道自己该不该转行学习大数据,不知道自己是否要转大数据专业,
原创
2018-08-11 11:19:08
1101阅读
首先,大数据的定义是什么?很多人都在说要进入大数据行业,要学习大数据技术,但大
原创
2023-04-19 10:04:16
349阅读
rd是研发(研究与开发),fe前端研发,qa是测试,ue用户体验,op是运维。另外,ui 就是用户设计,db数据库,pm产品经理
原创
2023-09-20 09:59:31
65阅读
排名前20位的大数据职位及其职责,你能胜任么大数据在全球范围内的IT就业市场占有越来越重要的影响。根据Gartner公司提供的数据,截至到2015年将有440万的IT工作来支持大数据,仅美国就会有190万的IT工作产生。看看我们列出的排名前20位的大数据职位及其职责列表。首席数据官Chief ...
转载
2016-09-20 17:17:00
70阅读
2评论
数据分析师、数据科学家、大数据专家三个职位的区别2018.6.11版权声明
原创
2018-06-11 22:02:37
37阅读