JavaSE进阶（七）——手写链表前言本篇笔记单纯炫技，其中***可能会有一些思想和逻辑***，能吃到多少就是你们自己的事了，录视频授课也需要至少两个课时（可能还不够），众所周知，我懒！所以……嘿嘿。 文章目录JavaSE进阶（七）——手写链表前言链表相关介绍要点代码总结 链表相关介绍要点链表的头结点（第一个元素是不存放元素值的，一般只用来当做链表的开始）；链表使通过引用来指向的，C语言中可以理解
转载
2023-11-29 11:23:13
48阅读
1.项目架构：2.编写WordCount类package com.yqq;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.Text;import o
原创
2022-07-02 00:09:11
139阅读
java面试：手写代码
二分查找法/**
* 二分查找法。时间复杂度：O(log n)
* 二分查找法：给定一组有序的数组，每次都从一半中查找。直到找到要求的数据。
*
* @param nums
* @param target
* @return
*/
pub
转载
2023-07-06 22:18:16
0阅读
1、Mapper类用户自定义一个Mapper类继承Hadoop的Mapper类Mapper的输入数据是KV对的形式（类型可以自定义）Map阶段的业务逻辑定义在map()方法中Mapper的输出数据是KV对的形式（类型可以自定义）注意：map()方法是对输入的一个KV对调用一次！！2、Reducer类用户自定义Reducer类要继承Hadoop的Reducer类Reducer的输入数据类型对应Map
转载
2023-12-20 14:59:42
69阅读
一、简介1.1、概述MapReduce是Hadoop提供的用于进行分布式计算的框架MapReduce是仿照Google MapReduce来实现的MapReduce会将整个计算过程拆分2个阶段：Map(映射)阶段和Reduce(规约)阶段1.2、组件1.2.1、Writable - 序列化在MapReduce中，要求被传输的数据必须能够序列化MapReduce提供了一套独立的序列化机制，基于AVR
转载
2023-07-19 15:38:56
257阅读
尽管Hadoop框架本身是使用Java创建的，但MapReduce作业可以用许多不同的语言编写。 在本文中，我将展示如何像其他Java项目一样，基于Maven项目在Java中创建MapReduce作业。
转载
2023-07-20 20:19:10
66阅读
（一）实现词频统计的基本的MapReduce编程。①在/user/hadoop/input文件夹(该文件夹为空)，创建文件wordfile1.txt和wordfile2.txt上传到HDFS中的input文件夹下。 文件wordfile1.txt的内容如下：I love SparkI love Hadoop 文件wordfile2.txt的内容如下：Hadoop is goodSpark is f
转载
2023-11-23 12:44:07
42阅读
1.1MapReduce核心思想分而治之，先分后和：将一个大的、复杂的工作或任务，拆分成多个小任务，最终合并。MapReduce是由Map和Redecu组成Map：将数据进行拆分Reduce：对数据进行汇总1.2偏移量行首字母或字符移动到当前文件的最前面需要移动的字符个数1.3Hadoop与Java数据类型对比Java类型：int、long、double, float、 boolean、 stri
转载
2023-12-07 11:20:02
38阅读
MapReduce JAVA框架开发流程总体流程用户提交任务给集群集群首先对输入数据源进行切片master 调度 worker 执行 map 任务worker 读取输入源片段worker 执行 map 任务，将任务输出保存在本地master 调度 worker 执行 reduce 任务，reduce worker 读取 map 任务的输出文件执行 reduce 任务，将任务输出保存到 HDFS细节
转载
2023-07-16 12:02:27
573阅读
本文主要基于Hadoop 1.0.0后推出的新Java API为例介绍MapReduce的Java编程模型。新旧API主要区别在于新API(org.apache.hadoop.mapreduce)将原来的旧API(org.apache.hadoop.mapred)中的接口转换为了抽象类。
转载
2023-07-20 20:16:30
70阅读
文章目录使用Eclipse创建MapReduce工程配置环境新建MapReduce工程分布式文件系统HDFSHDFS-JAVA接口之读取文件HDFS-JAVA接口之上传文件HDFS-JAVA接口之删除文件HDFS-JAVA接口之列举文件夹和文件列举文件夹列举文件HDFS-JAVA接口之创建目录HDFS-JAVA接口之下载文件HDFS-JAVA接口之写入文件 使用Eclipse创建MapReduc
转载
2023-11-28 15:28:56
29阅读
今天是2023年1月1日，绝佳的日子。前几天正好在开始重学java，那就从今天开始写博客记录学习之路。本科四年，工作三年，再加上去年九月开始读研，接触CS很久了。希望这次可以从一个比较宏观的角度，扎实地学好java。目前是先找了一个网课开始学（不想再啃大部头了，学C++那会就是看书，比较折磨）后期会加上刷题，做项目，准备面试题。每天学习量不求多，只求坚持。每天都在认真追求知识上的进步，那么生活自然
转载
2023-09-08 21:43:46
50阅读
文章目录视频教程连接实现的效果实现这些IOC的思路1. 获取到我们要管理的Class对象2.实例化要管理的对象 把初始化之后的对象给放到Map容器里面3.依赖注入的实现具体实现步骤注解MyBeanDefinition 存放Class和ClassNameMyAnnotationConfigApplicationContext(重点 IOC的核心)就和上面思路里面说的一样 分三步走就好了第一步的实现
转载
2023-08-16 21:18:30
85阅读
一、概述Spring的最根本的使命就是简化开发。体现在：基于POJO的轻量级和最小侵入性编程，通过DI和面向接口实现松耦合，基于切面和惯性声明式编程，通过切面和模板减少样板代码。Spring是面向Bean进行编程的，Spring提供了IOC容器通过配置文件或者注解的方式来管理对象之间关系。Spring的注入方式：Setter、构造方法、强制赋值。控制反转的两种方式是依赖注入和依赖查找，最早Spri
转载
2024-07-05 11:19:23
16阅读
手写代码模块（Java实现）——树0.Previous Prepare (TreeNode)private class TreeNode<T>{
private T data;
private TreeNode<T> left;
private TreeNode<T> right;
public
转载
2024-04-12 09:51:44
35阅读
HashMap简介HashMap是Java中一中非常常用的数据结构，也基本是面试中的“必考题”。它实现了基于“K-V”形式的键值对的高效存取。JDK1.7之前，HashMap是基于数组+链表实现的，1.8以后，HashMap的底层实现中加入了红黑树用于提升查找效率。HashMap根据存入的键值对中的key计算对应的index，也就是它在数组中的存储位置。当发生哈希冲突时，即不同的key计算出了相同
转载
2024-06-05 19:08:39
11阅读
遇到重复工作一定想办法将其转化为自动化，我觉得这才是合格的程序猿。我们日常开发中遇到的80%的代码都是增删改查，当然，已经有一些插件，比如MP提供了一整套的代码生成方案，但是提供的基本都是java代码，因为模板语言有太多种，根据每个人每个项目的不同而不同，但是，模板中一样也基本是列表和表单提交，怎么来解决这个重复工作呢？思路：依然依赖mp组件，因为mp已经提供了对应的BaseService，Bas
转载
2023-10-05 11:43:21
43阅读
算法流1.欧几里得算法（辗转相除法）：2.冒泡排序：3. 选择排序：4.插入排序：5.希尔排序：6.快速排序：7.二分查找：8.karatsuba算法： 1.欧几里得算法（辗转相除法）：public class HelloWorld {
public static int gcd(int a , int b){
if (b == 0)
return a;
int r = a %
转载
2023-09-01 10:44:26
87阅读
池化是我们在实际生产中经常用到的一种思想，通过一个 “池” 把资源统一的管理起来。可以达到对资源的合理管理、重复利用、减少资源创建/销毁的开销等目的。 常见的比如常量池、连接池、线程池，今天我们手撸一个线程池。 抛开语言特性，线程池无非是维护一堆线程阻塞等待任务的到来，并由主线程对任务线程的数量进行动态控制的组件。做到线程资源的复用及统一管理，同时避免大量的线程创建销毁的开销，并控制总的线
转载
2023-07-19 17:21:56
97阅读
一、前文回顾在上一篇文章中，我们探究了一个RPC框架最基本的一些技术，并且开始写了服务端的注册发现相关的代码，今天我们继续之前的进度往后。既然已经将服务暴露出去了，接下来我们要考虑的是如何通过网络的形式将其传输出去。二、网络模块开发客户端和服务端之间想要通信必然需要一个媒介，所以我们需要为我们的RPC框架搭建一个网络模块。那么提到网络编程那么就有以下几个方案：我们最先想到的是Java中的Socke
转载
2023-07-19 12:36:43
246阅读
