目录◆ 业务现状分析◆ Flume环境部署◆ Flume概述◆ Flume实战◆ Flume架构及核心组件
掌握Flink的核心概念及编程模型，如何在编程中执行key及转换函数，Flink支持的数据类型。1 课程目录3-2 核心概念概述3-3 DataSet和DataStream3-4 Flink编程模型3-5 延迟执行3-6 指定key之Tuple3-7 指定key之字段表达式3-8 指定key之key选择器函数3-9 指定转换函数3-10 Flink支持的数据类型...
以下用ES表Elastic Search1 面试题ES写入/查询数据的工作原理是什么呀？2 考点分析面试官就是想看看你是否了解ES的一些基本原理.ES无非就是写/查数据,你如果不明白你发起写入/搜索请求后,ES做了什么,那你该劝退了.3 详解3.1 ES写数据的执行流程客户端选择一个node发送请求过去,该node就是coordinating node(协调节点);coor...
1 现在常见的Java工程师/架构师对缓存技术的了解和掌握程度工作中都会用到一些缓存技术，redis/memcached基础使用，初步的集群知识我面试过的人里，能掌握到很少的缓存架构的人，屈指可数，个位数，而且都是在大公司有过类似的大型复杂系统架构经验的人2 缓存架构/技术掌握的不够，对你的发展带来了哪些阻碍？2.1 工作中如果你这块技术掌握不够，然后你的公司的项目遇到了一些相关的难题，...
1 面试题Dubbo中的SPI是什么？2 考点分析前面基础性的东西问完了，确定你应该了解Dubbo，那么自然问个稍微难的问题，就是SPI，先问问你这是个啥,然后问问你怎么实现的!其实就是看看你对dubbo的掌握如何3 SPI简介SPI 全称为 Service Provider Interface，是一种服务发现机制.说白了是啥呢，比如你有个接口，该接口有3个实现类，那么在系统运行时,...
1 面试题如何基于dubbo进行服务治理、服务降级、失败重试以及超时重试？2 考点分析服务治理其实就是看看你有没有服务治理的思想，因为这是做过复杂微服务的人肯定会遇到的问题!服务降级涉及到复杂分布式系统中必备的一个话题，因为分布式系统互相来回调用，任何一个系统故障了，你不降级，直接就整个瘫痪了!失败重试分布式系统中网络请求如此频繁，要是因为网络问题不小心失败了一次，是不...
1 本地环境macOS10.14.14node.js@6.14.4git@1.9.2hexo@6.4.01.1 安装Node.jsnode -v1.2 安装配置Git查看git是否安装成功git --version2 GitHub操作2.1 创建仓库新建一个名为你的用户名.github.io的仓库，这里，我的github用户名是Wasabi1234，那么就新建Wa...
1 面试题现在有一个未分库分表的系统，未来要分库分表，如何设计才可以让系统从未分库分表动态切换到分库分表上？2 考点分析你现在已经明白为啥要分库分表了，你也知道常用的分库分表中间件了，你也设计好你们如何分库分表的方案了（水平拆分、垂直拆分、分表），那问题来了，你接下来该怎么把你那个单库单表的系统给迁移到分库分表上去？所以这都是一环扣一环的，就是看你有没有全流程经历过这个过程假设，你现有...
1 面试题设计可动态扩容的分库分表2 考点分析选一个数据库中间件,然后深入之设计分库分表的方案，要分成多少个库，每个库分成多少个表基于已选的数据库中间件，以及在测试环境建立好的分库分表，
1 面试题分库分表之后，id主键如何处理？2 考点分析其实这是分库分表之后你必然要面对的一个问题，就是id咋生成？要是分成多个表之后，每个表都是从1开始累加，那肯定不对啊，需要一个全局唯一的id来支持!下面来看看有哪些可行方案~3 数据库自增id分库分表的id主键问题系统每次得到一个id，都是往一个库的一个表里插入一条没什么业务含义的数据然后获取一个数据库自增id拿到该...
一般来说，互联网的面试，一般都会考察你，什么是分布式系统，高并发，简单的高可用问题限流、熔断、降级，在分布式的系统架构中，微服务架构中，其实都是最常见、基础和简单的保障系统高可用的手法。dubbo去开发了，spring cloud去开发了，在这个系统的接口调用中，我们是用hystrix去实现一整套的高可用保障机制，基于hystrix做限流、熔断和降级。hystrix是国外的netflix开源的...
当开始执行command，调用了它的execute()之后，Hystrix内部的执行流程和步骤以及原理是怎样的呢?Hystrix执行时的8大流程及原理图1 创建HystrixCommand/HystrixObservableCommand一个HystrixCommand或HystrixObservableCommand对象，代表对某个依赖服务发起的一次请求或者调用构造的时候，可在构造函...
回顾执行流程创建command执行commandrequest cache短路器，如果打开了，fallback降级机制1 fallback降级机制Hystrix调用各种接口，或者访问外部依赖，MySQL，Redis，ZooKeeper，Kafka等,出现任何异常的情况,比如访问报错对每个外部依赖，无论是服务接口，中间件，资源隔离，对外部依赖只能用一定量的资源去访问，线程池/信号...
Hystrix 通过判断线程池或者信号量是否已满，超出容量的请求，直接 Reject 走降级，从而达到限流的作用。限流是限制对后端的服务的访问量，比如说你对 MySQL、Redis、Zookeeper 以及其它各种后端中间件的资源的访问的限制，其实是为了避免过大的流量直接打死后端的服务,限制服务对后端的资源的访问1 线程池隔离技术的设计原则Hystrix采取了bulkhead舱壁隔离技术，将...
1 缓存技术掌握不够，会对发展带来了哪些阻碍1.1 工作中如果你这块技术掌握不够，然后你的公司的项目遇到了一些相关的难题，高并发+高性能的场景，hold不住类似的这种高并发的系统因为缓存架构做得不好，不到位，实际在公司的项目里，出了一些大case，导致系统崩溃，巨大的经济损失1.2 职业发展中redis，memcached，activemq，zookeeper，kafka，lucene，...
1. 环境:系统:Windows10IDE:intellij IDEA2017.1maven:3.5.02. 目录结构3. 代码package com.imooc;import org.springframework.web.bind.annotation.RequestMapping;import org.springframework.web.bind.annotation.Requ
application.properties文件可以方便地帮助细粒度地调整Spring Boot的自动配置不需要告诉Spring Boot为你加载此文件,只要它存在就会被加载,Spring和应用程序代码就能获取其中的属性不需要声明配置文件中值的类型,需要注入时再定义变量的类型即可1. 修改嵌入式Tomcat监听端口及访问前缀 点击运行,修改成功 2. yml VS properties
对于只使用@Controller注解控制器,必须配套有模板(如JSP),否则报404错误 而使用@RestController注解则不须配有模板只使用@Controller注解须添加模板,此处为如Spring官方的Thyemleaf模板(替代JSP的好东西),添加jar包 目录结构:模板文件:index.heml<h1>hello Spring Boot!</h1>控制器类:import org
并发编程的挑战并发编程的目的是为了让程序运行得更快，但是，并不是启动更多的线程就能让程序最大限度地并发执行。在进行并发编程时，如果希望通过多线程执行任务让程序运行得更快，会面临许多挑战，比如上下文切换的问题、死锁的问题，以及受限于硬件和软件的资源限制问题，本章会介绍几种并发编程的挑战以及解决方案。1 上下文切换我们都知道，即使是单核处理器也支持多线程执行代码，CPU通过时间片（一般是数十ms）分配算
知道跳表（Skip List）是在看关于redis的书的时候，redis中的有序集合使用了跳表数据结构。接着就查了一些博客，来学习一下跳表。后面会使用java代码来简单实现跳表。1 什么是跳表跳表由William Pugh发明，他在论文《Skip lists: a probabilistic alternative to balanced trees》中详细介绍了跳表的数据结构和插入删除等操作，论文
ThreadLocal，即线程变量，是一个以ThreadLocal对象为键、任意对象为值的存储结构。这个结构被附带在线程上，也就是说一个线程可以根据一个ThreadLocal对象查询到绑定在这个线程上的一个值。可以通过set(T)方法来设置一个值，在当前线程下再通过get()方法获取到原先设置的值。在如下所示的例子中，构建了一个常用的Profiler类，它具有begin()和end()两个方法，而e
在Java中，使用线程来异步执行任务。Java线程的创建与销毁需要一定的开销，如果我们为每一个任务创建一个新线程来执行，这些线程的创建与销毁将消耗大量的计算资源。同时，为每一个任务创建一个新线程来执行，这种策略可能会使处于高负荷状态的应用最终崩溃。Java的线程既是工作单元，也是执行机制。从JDK 5开始，把工作单元与执行机制分离开来。工作单元包括Runnable和Callable，而执行机制由Ex
JavaSE 提供的最后一个批注是 @SuppressWarnings。该批注的作用是给编译器一条指令，告诉它对被批注的代码元素内部的某些警告保持静默。 Java5 为 Java 语言增加了几个新的特性，并且和它们一起增加了许多新的警告并承诺在将来增加更多的警告。您可以为 "javac" 增加 -Xlint 参数来控制是否报告这些警告（如上面的 @Deprecated 部分所示）。 清单：
1 概述这是Java中经典的问题,在面试中也经常被问起.很多书提到要重载hashCode()和equals()两个方法才能实现自定义键在HashMap中的查找,但是为什么要这样以及如果不这样做会产生什么后果,好像很少有文章讲到,所以来这一篇记录下.2 案例分析首先,如果我们直接用以下的Person类作为键,存入HashMap中,会发生发生什么呢?package com.csdn;/** * @au
加锁和定义常量，其实还有第三种ThreadLocal
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/commons/pool2/PooledObjectFact添加commons-pool2 jar包即可
作者：ScienJus 链接：https://www.zhihu.com/question/34243607/answer/58314162 来源：知乎 著作权归作者所有。商业转载请联系作者获得授权，非商业转载请注明出处。 个人认为消息队列的主要特点是异步处理，主要目的是减少请求响应时间和解耦。所以主要的使用场景就是将比较耗时而且不需要即时（同步）返回结果的操作作为消息放入消
Exception in thread "Thread-13" com.alibaba.fastjson.JSONException: default constructor not found. class com.nowcoder.async.EventModel at com.alibaba.fastjson.util.JavaBeanInfo.build(JavaBeanInfo.j
看看下面代码,猜猜结果 想必大家看到类似的代码开始怀疑笔者是不是又挖坑让大伙跳了吧，来看一下结果。 没错，有坑，同样是对象，都是放到了set中，一个打印size()是1，另一个打印size()是2。假设我们现在正在给用户批量发工资，张三出现了两次，虽然我们用Set去了重，但还是会给张三发两次工资。在Java程序中，有很多的“公约”，我们称之为编程规范，遵守这些规范实现你的代码，会让你避开
这张图里的内容对我们学习Java来说，非常的重要，白色的部分是需要去了解的，黄色部分是我们要去重点了解的，不但要知道怎么去用，至少还需要读一次源码。绿色部分内容已经很少用了，但在面试题中有可能会问到，我们来看一个经常出现的面试题：Arraylist与Vector的区别是什么？首先我们给出标准答案： 1、Vector是线程安全的，ArrayList不是线程安全的。 2、ArrayList在底层数组
Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号
