1、打开cygwin，启动hadoop，运行jps命令查看节点启动情况2、切换到hadoop根目录，运行指令 echo "hello boy hei baby hello word hello hadoop baby girl baby">f1.txt 在hadoop根目录下新建f1.txt，可用-ls 查看是否创建成功3、运行指令 bin/hadoop fs -mkdir input 在hdfs上新建一文件夹，命名为input4、运行指令 bin/hadoop fs -put f1.txt input 将f1.txt复制到input文件夹下，运行bin/hadoop
原创
2021-12-30 17:30:51
145阅读
## Python在大数据领域的应用
随着大数据技术的快速发展，Python作为一种简单易学的编程语言，在大数据领域也逐渐崭露头角。Python具有丰富的数据处理库和强大的数据可视化功能，使其成为大数据处理的利器。本文将介绍Python在大数据领域的应用，并通过代码示例展示其强大的功能。
### Python与大数据
Python在大数据领域的应用主要集中在数据处理、数据分析和数据可视化三大
原创
2024-05-25 06:48:01
34阅读
# 如何实现Java Bigdata
## 1. 介绍
作为一名经验丰富的开发者，我将向你介绍如何实现"Java Bigdata"。这个过程将包括一系列步骤，我会逐步引导你完成。
## 2. 流程
```mermaid
flowchart TD
A[开始] --> B[获取数据]
B --> C[处理数据]
C --> D[存储数据]
D --> E[展示结果
原创
2024-02-29 06:21:16
30阅读
大约有那么两三年了，“互联网+”，“大数据”，“云计算”这些词语，出现在大众面前，这些词语还被政府官员和“创业者”们天天挂在嘴边，真是搞不懂，自己心里根本不明白这是怎么一回事。 说个小的事情，和本文没有什么太多的联系，算是我自己的吐槽罢了， 被这些人（指第一段的人）搞得，有什么小生和一些创业的小子在找我的时候，“我们是依托于云计算，将我们的产品360°无缝链到我们每一个客户的手中，
原创
2021-03-05 20:42:18
404阅读
主题>>: cloudEra hadoop Ecosystem sim Unscramble; ruiy哥个人理解总结,其实我无非也还是站在那"砖家/叫兽"的肩上瞎扯扯(至于名词我就乱引用了,木关它神马领域？在此用用吧,你要是想改改啥,随你吧,搞技术的随意最好),不是巨人肩啊,如今已经没有牛顿了,更没他的肩给我们搭,哈哈其实我也是瞎说
原创
2021-12-30 16:29:30
80阅读
在高并发业务场景下，典型的阿里双11秒杀等业务，消息队列中间件在流量削峰、解耦上有不可替代的作用。之前介绍了MQ消息队列的12点核心原理总结，以及如何从0到1设计一个MQ消息队列，以及RPC远程调用和消息队列MQ的区别今天我们一起来探讨：全量的消息队列究竟有哪些？Kafka、RocketMQ、RabbitMQ的优劣势比较以及消息队列的选型最全MQ消息队列有哪些那么目前在业界有哪些比较知名的消息引擎
转载
2024-10-21 12:11:50
31阅读
前言：大数据就是互联网发展到现今阶段的一种表象或特征而已，没有必要神话它或大量）
原创
2022-08-19 17:30:42
233阅读
Java中的常量通常指的是一个固定的值 在Java中主要利用关键字final来定义一个常量，常量一旦被初始化后不能再更改其值 static的关键字表示：不创建对象也能调用static修饰的属性、方法等。static跟具体对象无关； 通常定义一个常量来存储常量，例如：在项目中使用一个公共路径的时候，则
转载
2020-01-01 23:44:00
181阅读
2评论
从上图我们可以看出，这就是一个继承，动物类是父类，猫、狼、狗可以继承父类的某些属性，例如： 动物类以下属性： 眼睛 耳朵 鼻子 狼、猫、狗特有属性为其叫声 那么下面用Java代码来实现描述继承 代码 package cn.test.logan.day10; /** * 父类 动物类 * @autho
转载
2019-12-29 12:18:00
129阅读
2评论
接口概念 Java接口是一系列方法的声明，是一些方法特征的集合，一个接口只有方法的特征没有方法的实现，因此这些方法可以在不同的地方被不同的类实现，而这些实现可以具有不同的行为（功能）。 以下是个人理解： 在软件开发过程中，当我们开发一个大型项目的时候，可能很多人一起共同开发一个项目，但是整个项目分为
转载
2019-12-23 21:44:00
98阅读
2评论
华为认证考试bigdata是华为公司针对大数据领域的专业认证考试。随着大数据技术的迅速发展，越来越多的企业和个人开始关注并投身于大数据行业。作为国内领先的通信设备制造商，华为在大数据领域也有着深厚的积淀和实力，因此推出了华为认证考试bigdata，旨在帮助更多的专业人士获取权威认证，提升自己在大数据领域的竞争力。
华为认证考试bigdata内容涵盖了大数据领域的相关知识和技术，包括大数据的概念、
原创
2024-03-11 13:23:32
103阅读
HashSet简介 HashSet是一个集合数据类型，具有以下三个特性： （1）可以存储过个数据对象 （2）HashSet中的数据不能重复 （3）HashSet的数据存储是无序的 HashSet的几个常用方法如下： （1）add：添加元素到集合中 （2）size：获取集合的长度 （3）remove：
转载
2019-12-21 13:35:00
478阅读
2评论
HashMap简介 HashMap是一种非常常见、方便和有用的集合，是一种键值对（K-V）形式的存储结构 常见的方法如下： put：将数据添加到集合中 get：获取集合中的元素 size：获取集合的长度 remove：移除集合中的键值对 containsKey：判断指定的key是否存在 实战演练 1
转载
2019-12-21 13:13:00
120阅读
2评论
什么是数组？数据是可以装一组数据的变量 1.定义数组 float[] arr1 = new float[10]; // 可以装10个float数据 int[] arr2 = new int[10]; // 可以装10个int数据 String[] arr2 = new String[10]; //
转载
2019-12-11 22:23:00
158阅读
2评论
1.for循环 语法： for (初始表达式;布尔表达式;步进) { 循环体； } 实例： package cn.test.logan.day02; import java.util.Scanner; public class ForDemo { public static void main(St
转载
2019-12-11 20:47:00
38阅读
2评论
1.反射是什么？ 比较官方点的解释 Java反射机制是在运行状态中 对于任意一个类，都能知道这个类的所以属性和方法； 对于任何一个对象，都能够调用它的任何一个方法和属性； 这样动态获取新的以及动态调用对象方法的功能就叫做反射 个人理解： 反射也是自己看了教程以后发现比较有趣的一个东西，此处写的是个人
转载
2019-12-29 15:42:00
92阅读
2评论
1、插件安装以DataGrip为例，点击file-settings-plugins 在market中搜索Big Data Tools,安装即可2、本地配置解压缩Hadoop安装包到计算机本地路径，如：E:/Hadoop-3.3.4设置$HADOOP_HOME环境变量，指向E:/Hadoop-3.3.4下载hadoop.dll和winutils.exe，将这两个文件放在$HADOOP_HOME/bi
