1 jdk
yum install lrzsz 比alt+p上传文件更方便
rz 回车就可以上传文件了，上传是上传到当前目录下
解压上传的jdk
tar -zxvf jdk-7u80-linux-x64.tar.gz
配置变量
vi /etc/profile
#在文件最后添加
export JAVA_HOME=/root/apps/jdk1.7.0_80
export PATH=$
转载
2018-12-23 18:49:00
68阅读
2评论
“大数据”时下一个热门的词语，近几年来，关于大数据的著作和文章铺天盖地，似乎也在共同在传递一个信息：越来越多的行业、人士开始关注并实际探索大数据的应用，我们正在一起描绘着大数据巨大效用的蓝图，但在实践的路上，我们都处在孩子起步阶段小步前行。 一、什么是大数据 大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理
转载
2023-08-09 15:14:50
81阅读
摘要：网络工程师IP数据报格式考点有哪些？小编为大家整理了网络工程师IP数据报格式考试考点，供大家参考。
转载
2023-07-29 18:05:21
63阅读
大数据工程师要具备的基础知识及能力想要学习大数据，最重要的就是要掌握计算机基础知识，毕竟大数据是建立在互联网上的，不会计算机基础知识和操作，是完全没办法入手的。另外，学习大数据还要有英语基础，各种代码都是用英文表达，不会英语学起来也非常吃力，下面就给大家介绍一下大数据工程师要具备的基础知识及能力。一、大数据工程师要具备的知识1、具有计算机编程功能。大数据技术建立在互联网上，所以拥有编程技巧有很大的
转载
2024-06-26 17:58:30
21阅读
经常有初学者在博客和问我，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很高。如果自己很迷茫，为了这些原因想往大数据方向发展，也可以，那么我就想问一下，你的专业是什么...
转载
2018-08-20 08:29:00
77阅读
2评论
申明：本文旨在为普通程序员（Java程序员最佳）提供一个入门级别的大数据技术学习路径，不适用于大数据工程师的
原创
2022-01-04 09:46:51
383阅读
经常有初学者在博客和QQ问我，自己想往大数据方向发展，该学哪些技术，学习路线是什么样的，觉得大数据很火，就业很好，薪资很高。如果自己很迷茫，为了这些原因想往大数据方向发展，也可以，那么我就想问一下，你的专业是什么...
转载
2018-08-20 08:29:00
67阅读
2评论
在当今信息化社会，大数据已成为推动经济社会发展的重要力量。随着大数据技术的不断发展和应用，大数据工程师这一职业也备受瞩目。作为大数据领域的专业人才，大数据工程师需要掌握一系列的软件工具，以高效地处理、分析和挖掘海量数据。本文将围绕大数据工程师常用软件展开探讨，帮助读者了解这些软件在大数据处理中的应用与价值。
首先，我们不得不提的是Hadoop。Hadoop是一个开源的分布式计算框架，它能够处理大
原创
2024-05-28 13:55:28
209阅读
在当今信息化时代，大数据已经渗透到各行各业，成为推动社会进步的重要力量。伴随着大数据技术的迅猛发展，大数据软件开发工程师这一职业角色也逐渐崭露头角，成为了众多企业和组织争相追捧的人才。本文将从大数据软件开发工程师的岗位职责、技能要求以及发展前景等方面展开探讨，旨在为广大软考考生提供一定的参考与指导。
首先，我们来探讨大数据软件开发工程师的岗位职责。大数据软件开发工程师主要负责设计、开发、测试和维
原创
2024-05-28 13:54:23
106阅读
大数据学习---Hadoop学习
原创
2022-02-21 17:08:29
690阅读
系统规划与管理师综合知识真题考点：大数据的特性
大数据其具有4V特性：体量大(Volume)、多样性(Variety)、价值密度低(Value)、快速化(Velocity)。
注：详见《系统规划与管理师教程》(2017年审定通过版)55页
考点相关真题
以下关于大数据的叙述中，不正确的是（ ）。
A.大数据的意义是对数据进行专业化处理，实现数据的“增值”
B.大数据的4个特点是数据类型多
转载
2023-11-16 01:32:35
27阅读
MapR 成立于 2009 年，是全球三大 Hadoop 开源大数据软件提供商之一，其余两家是 Cloudera 和 Hortonworks（2018两家公司已经合并）。在很长一段时间里，Hadoop 就是大数据的代名词，也是开源的大数据基础软件与平台的基础。但是 Hadoop 在具体的业务场景中还缺乏很多功能，而 Hadoop 商业化公司所做的事情就是完善这些功能，使其更好地应用于企业的业务场景
转载
2023-07-19 15:57:46
57阅读
SSH免密登陆配置
1 SSH工作机制
1、相关概念
SSH 为 Secure Shell（安全外壳协议） 的缩写。
很多ftp、pop和telnet在本质上都是不安全的，因为它们在网络上用明文传送口令和数据，别有用心的人非常容易就可以截获这些口令和数据。而SSH就是专为远程登录会话和其他网络服务提供安全性的协议。
SSH的具体实现是由客户端和服务端的软件组成的
服
转载
2018-12-06 19:37:00
140阅读
2评论
大数据离线处理技术学习要点图：虽然网上也有很多的学习路线，很多的方法建议，各类不同的工具，但是找到属于自己的才是最好的。下面我就来详细说下我的学习路线吧。我还是要推荐下我自己创建的大数据资料分享群142973723，这是大数据学习交流的地方，不管你是小白还是大牛，小编都欢迎，不定期分享干货，包括我整理的一份适合零基础学习大数据资料和入门教程。一、基础阶段1、开始大数据学习之前，首先要把基础打好。我
转载
2018-11-23 13:32:30
190阅读
点赞
在美国，大数据工程师平均年薪达17.5万美元，在中国顶尖的互联网公司里，大数据工程师的薪酬比同级别的其他职位高出30%以上。DT时代来得太突然了，国内发展势头很猛，而大数...
转载
2022-08-09 21:32:02
132阅读
大数据是一个大的数据集合，通过传统的计算技术无法进行处理。这些数据集的测试需要使用各种工具、技术和框架进行处理。大数据涉及数据创建、存储、检索、分析，而且它在数量、多样性、速度方法都很出色。作者：佚名一、什么是大数据?大数据是一个大的数据集合，通过传统的计算技术无法进行处理。这些数据集的测试需要使用各种工具、技术和框架进行处理。大数据涉及数据创建、存储、检索、分析，而且它在数量、多样性、速度方法都
4.1 Linux系统软件安装方式
Linux上的软件安装有以下几种常见方式：
1、二进制发布包
软件已经针对具体平台编译打包发布，只要解压，修改配置即可
2、RPM发布包
软件已经按照redhat的包管理工具规范RPM进行打包发布，需要获取到相应的软件RPM发布包，然后用RPM命令进行安装
3、Yum在线安装
软件已经以RPM规范打包，但发布在了网络上的一些服务器上，可用yum在线安装服
转载
2018-12-06 20:10:00
157阅读
2评论
大数据基本概述 一、大数据基本概念 1、大数据(Big Data)：指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，需要新处理模式才能俱有更强的决策边、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 2、主要解决：海量数据的存储和海数据的分析计算问题。 二、大数据的特点(4v) 1、Volume (大量)：截至目前，人类生产的所有印刷材料的数据量是200PB，而历
转载
2023-09-27 18:54:17
159阅读
随着信息技术的迅猛发展，大数据已经成为当今时代的重要特征和宝贵资源。在这个数据驱动的时代，大数据软件技术成为了越来越多人追逐的热点。无论是出于职业发展的需要，还是对个人技能提升的追求，报考大数据软件相关的专业认证已经成为了不少人的选择。特别是在软考（软件专业技术资格和水平考试）中，大数据软件方向的认证更是备受瞩目。
软考作为我国IT行业的重要考试之一，其大数据软件方向的认证不仅具有极高的含金量，
原创
2024-05-27 11:41:43
57阅读
对于Pandas运行速度的提升方法，之前已经介绍过很多回了，里面经常提及Dask，很多朋友没接触过可能不太了解，今天就推荐一下这个神器。1、什么是Dask？Pandas和Numpy大家都不陌生了，代码运行后数据都加载到RAM中，如果数据集特别大，我们就会看到内存飙升。但有时要处理的数据并不适合RAM，这时候Dask来了。Dask是开源免费的。它是与其他社区项目(如Numpy，Pandas和Scik
转载
2024-01-16 11:07:12
30阅读
