经常有初学者在博客和问我，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很高。如果自己很迷茫，为了这些原因想往大数据方向发展，也可以，那么我就想问一下，你的专业是什么...
转载
2018-08-20 08:29:00
77阅读
2评论
申明：本文旨在为普通程序员（Java程序员最佳）提供一个入门级别的大数据技术学习路径，不适用于大数据工程师的
原创
2022-01-04 09:46:51
383阅读
经常有初学者在博客和QQ问我，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很高。如果自己很迷茫，为了这些原因想往大数据方向发展，也可以，那么我就想问一下，你的专业是什么...
转载
2018-08-20 08:29:00
67阅读
2评论
大数据学习---Hadoop学习
原创
2022-02-21 17:08:29
690阅读
SSH免密登陆配置
1 SSH工作机制
1、相关概念
SSH 为 Secure Shell（安全外壳协议） 的缩写。
很多ftp、pop和telnet在本质上都是不安全的，因为它们在网络上用明文传送口令和数据，别有用心的人非常容易就可以截获这些口令和数据。而SSH就是专为远程登录会话和其他网络服务提供安全性的协议。
SSH的具体实现是由客户端和服务端的软件组成的
服
转载
2018-12-06 19:37:00
140阅读
2评论
大数据离线处理技术学习要点图：虽然网上也有很多的学习路线，很多的方法建议，各类不同的工具，但是找到属于自己的才是最好的。下面我就来详细说下我的学习路线吧。我还是要推荐下我自己创建的大数据资料分享群142973723，这是大数据学习交流的地方，不管你是小白还是大牛，小编都欢迎，不定期分享干货，包括我整理的一份适合零基础学习大数据资料和入门教程。一、基础阶段1、开始大数据学习之前，首先要把基础打好。我
转载
2018-11-23 13:32:30
190阅读
点赞
在美国，大数据工程师平均年薪达17.5万美元，在中国顶尖的互联网公司里，大数据工程师的薪酬比同级别的其他职位高出30%以上。DT时代来得太突然了，国内发展势头很猛，而大数...
转载
2022-08-09 21:32:02
132阅读
大数据基本概述 一、大数据基本概念 1、大数据(Big Data)：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，需要新处理模式才能俱有更强的决策边、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 2、主要解决：海量数据的存储和海数据的分析计算问题。 二、大数据的特点(4v) 1、Volume (大量)：截至目前，人类生产的所有印刷材料的数据量是200PB，而历
转载
2023-09-27 18:54:17
159阅读
学习目标：P12-23学习内容：Day2sql 在企业中的常用框架和结构调优——调优：在资源不变的前提下，让作业的执行性能提高。常用框架：Hive，对应的SQL执行引擎的部分为：MapReduce/Spark/Tez &nb
转载
2024-01-15 09:48:50
36阅读
架构图
重要类介绍
ActorSystem
在Akka中，ActorSystem是一个重量级的结构，他需要分配多个线程，所以在实际应用中，ActorSystem通常是一个单例对象，我们可以使用这个ActorSystem创建很多Actor。
Actor
在Akka中，Actor负责通信，在Actor中有一些重要的生命周期方法。
1.preStart()方法：该方法在Actor对象构造方法执行后
转载
2019-06-04 17:19:00
201阅读
2评论
数据工程工作存在于各个行业，在银行业、医疗保健业、大型科技企业、初创企业和其他行业找到工作机会。许多职位描述要求数据工程师、拥有数学或工程学位，但如果有合适的经验学位往往没那么重要。那么如何获得数据开发相关岗位的工作经验？如果是应届毕业生争取获得一个数据工程师的实习机会。门槛最低雇主们愿意找一个没有工作经验的人；另一种是侧面获得该职位，即使你没有计算机科学或数学背景，仍然可以通过获得分析师或项目经
转载
2024-01-08 22:43:43
49阅读
计算圆周率
[root@mini1 bin]# ./run-example SparkPi
[root@mini1 bin]# ./run-example SparkPi 10
[root@mini1 bin]# ./run-example SparkPi 1000
运行spark-shell的两种方式：
1直接运行spark-shell
单机通过多线程
转载
2019-06-10 18:46:00
187阅读
2评论
在信息技术迅猛发展的今天，大数据已经成为推动社会进步和产业升级的重要力量。而大数据平台网络规划设计师，作为这一领域的专业技术人才，在构建和维护大数据平台方面扮演着至关重要的角色。他们不仅需要具备扎实的网络知识和规划设计能力，还需要熟悉大数据技术和应用，能够根据实际需求设计出高效、稳定、安全的大数据网络平台。
大数据平台网络规划设计师的工作涉及多个方面。首先，他们需要进行需求分析，明确大数据平台的
原创
2024-02-21 14:06:19
8阅读
# 大数据机器学习毕业设计指导
作为一名刚入行的小白，面对毕业设计的“大数据机器学习”课题，可能会感到手足无措。本文将为你提供一个详细的流程指导，以及相关的代码示例，帮助你顺利完成毕业设计。
## 流程概述
在进行一个大数据机器学习项目时，可以将整个过程分解为以下几个步骤：
| 步骤 | 描述 |
|------|---------------
2014级《程序设计基础（二）》正式结束，按惯例将数据做个整理。无论师生，都可以从中找出值得自己总结的东西。 程序设计的水平，让代码行来说话。没有有效积累的，抽出时间，希望还在。一、发表博文情况统计1、总体统计学号全学年总数量学期1数量学期2数量学期2增量 访问积分排名评论平均168.6492.2976.35-15.95 21761.951903.619810.2254.04最大52718734
原创
2022-03-17 15:11:02
112阅读
2014级《程序设计基础（二）》正式结束，按惯例将数据做个整理。无论师生，都可以从中找出值得自己总结的东西。 程序设计的水平，让代码行来说话。没有有效积累的，抽出时间，希望还在。一、发表博文情况统计1、总体统计学号全学年总数量学期1数量学期2数量学期2增量 访问积分排名评论平均168.6492.2976.35-15.95 21761.951903.619810.2254.04最大52718734
原创
2021-05-26 11:13:45
52阅读
# 大数据的机器学习毕业设计题目探索
随着大数据的迅速发展，机器学习作为其重要的应用领域，吸引了越来越多的学术和工业界的关注。本篇文章将介绍几个有趣的机器学习毕业设计题目，并附带代码示例，帮助同学们从中获得灵感。
## 题目一：基于社交媒体的数据情感分析
在社交媒体上，用户的评论和反馈能直接反映出对某种产品或服务的情感态度。通过对这些数据进行情感分析，可以为企业提供宝贵的市场调研信息。我们可
随着各行各业的数据量快速增长，无论是从对数据的存储、分析、处理和挖掘等方面提出了越来越高的要求。IT行业正在逐渐向“DT”行业转变，未来是以数据为驱动的。所以我认为大数据是未来一个主流方向，了解和学习大数据对我们以后的工作和生活都有一定帮助。 近期我个人学习了大数据工程师微职位这门课，并且已经通过了所有的考核。下面切入正题，分享一下我的学习心得
原创
2017-09-05 22:25:05
1487阅读
点赞
1评论
随着各行各业的数据量快速增长，无论是从对数据的存储、分析、处理和挖掘等方面提出了越来越高的要求。IT行业正在逐渐向“DT”行业转变，未来是以数据为驱动的。所以我认为大数据是未来一个主流方向，了解和学习大数据对我们以后的工作和生活都有一定帮助。 近期我个人学习了大数据工程师微职位这门课，并且已经通过了所有的考核。下面切入正题，分享一下我的学习心得，因为篇幅关系，不涉及具体知
转载
2017-12-21 16:51:14
10阅读
大数据架构师学习成神之路，一个菜鸟如何从入门到入土的路线，拥有它才能预测你的未来......
原创
精选
2022-05-16 17:42:37
1357阅读
点赞
