对于并发与多线程的处理，是一个优秀的技术工程师成长过程中必须攻下的难关。它贯穿着日常工作，也是入职面试重点考察的重点。我们用5分钟复习一下并发与多线程。01知识点汇总 多线程协作时，因为对资源的锁定与等待会产生死锁，需要了解产生死锁的四个基本条件，要明白竞争条件与临界区的概念，知道通过破坏造成死锁的4个条件来防止死锁。除了了解进程间的通信方式，还要知道线程的通信方式，通信
需求背景：1、通过筛选条件过滤数据（多线程主要解决这一步查询慢的问题）2、数据填充EXCEL3、多EXCEL打zip包上传到文件服务器4、先返回下载信息，再同步导出EXCEL报表数据主要逻辑和方法：注册异步线程池/**
* 注册异步线程池
*/
@Bean("asyncThreadPool")
public ThreadPoolTaskExecutor asyn
转载
2024-03-14 06:13:29
705阅读
最近写了个excel导入并多线程持久化到数据库的功能，捣鼓了一天才弄好，先记录下来防止自己忘了。（1）先controller类中方法。@AccessLog
@ApiOperation(value = "导入excel", httpMethod = "POST", notes = "导入excel")
@RequestMapping(value = "/importExcel",me
转载
2023-08-18 15:53:12
238阅读
0.引言在并发编程中，锁是一种重要的同步机制，用于控制对共享资源的访问。Java 提供了多种锁的实现，每种锁都有不同的特性和适用场景。本文将深入介绍 Java 中常见的锁类型，包括内置锁、显式锁、读写锁等，并讨论它们的使用方法和最佳实践。1. 内置锁（synchronized）内置锁是 Java 中最基本的锁机制，通过 synchronized 关键字来实现。它可以用于同步方法或同步代码块，保证同
前几天看到有人问到我之前写的一篇博客的中的内容：记使用POI多线程写Excel数据的过程和收获，存在部分疑问 原本那边博客只是一时兴起写的东西，有头没尾，其实到最后只是知道错了，但是不知道哪里错了。两个月过去了，经过硬刚了一大堆源代码后，看到有人问起以前的东西，突然想回过头看看能否有新的收获。问题首先还是之前的代码public void setWorkbookData(XSSFWorkbook w
转载
2023-08-30 17:13:35
196阅读
周五的时候，同事突然问我有没有做过多线程写Excel的数据，看我一时没理解，同事说就是多线程往workbook中写数据。说起来Excel的操作之前做的很多了，但是重来没考虑过这么做，不过既然提起了，而且网上也有相关内容，何不自己尝试一下？于是自己便尝试用自己微薄的技术水平来实现下这个逻辑。首先考虑需要哪些东西：首先我们需要一个生成和处理数据的类：WriteDataUtils；package dai
转载
2023-09-08 18:23:01
328阅读
1、需求背景为提升导出数据的性能，采用多线程的方式实现导出百万级别的数据到excel。2、考虑前提大数据量导出到文件，首先需要考虑的是内存溢出的场景：数据库读取数据到内存中、将数据写入到excel进行大量的IO操作。考虑到一个文件数据过大，用户打开慢，体验不好。针对这些问题的考虑，采用多线程的方式多个线程同时处理查询数据，一个线程生成一个excel，最后在合并数据返回，以达到提高效率的目的。3、实
转载
2023-09-20 16:08:05
3056阅读
# Java多线程并发测试教程
## 简介
本教程将向你详细介绍如何使用Java编写多线程并发测试。在这个过程中，你将学习到如何创建多个线程并同时执行它们，以及如何对并发程序进行正确的测试和评估。
## 流程概述
下面是整个过程的流程概述，你可以按照这个流程进行操作。
| 步骤 | 描述 |
|------|------|
| 步骤一 | 创建一个实现Runnable接口的类 |
| 步
原创
2024-01-16 08:11:32
22阅读
1背景 有时候会向excel文件中写入数据，为了提高写入速度，需要向每个sheet页同时写入数据；此时，可以采用多线程的方式同时进行写入，提高效率。2思路CountDownLatch类、ExecutorService类（这里只是一种方式，当然还有其他的方式）。 2.1CountDownLatch类 该类是用来同步多线程处理的类，只有等到每个线程运行完成后，它才会继续后面的流程；打个这
转载
2023-06-27 15:30:52
356阅读
↵起因是这样的，用户要下载对账单明细，也就是交易明细，我们公司的数据库的设计是，一天一张表，类似于trace_20190708,trace_20190709 ....... 这样的类型，所以设计生产者的时候是，一个线程负责某天的表，线程数不要超过查询的天数总和（例如读取20190720-20190730 这十天的数据，那么线程数不能超过10个，也不能过多，看自
转载
2024-01-04 18:50:27
96阅读
1.线程的概念：线程(thread)是指一个任务从头至尾的执行流，线程提供一个运行任务的机制，对于java而言，一个程序中可以并发的执行多个线程，这些线程可以在多处理器系统上同时运行。当程序作为一个应用程序运行时，java解释器为main()方法启动一个线程。 2.并行与并发：(1)并发：在单处理器系统中，多个线程共享CPU时间，而操作系统负责调度及分配资源给它们。(2)并行：在多处理器
转载
2023-09-11 10:05:40
54阅读
话不多说直接上代码，带详细注释测试类中测试方法如下<dependency>
<groupId>org.apache.poi</groupId>
<artifactId>poi</artifactId>
<version>3.14</ver
转载
2023-11-22 19:49:14
239阅读
作为一款优秀的非内存数据库，HBase和传统数据库一样提供了事务的概念，只是HBase的事务是行级事务，可以保证行级数据的原子性、一致性、隔离性以及持久性，即通常所说的ACID特性。为了实现事务特性，HBase采用了各种并发控制策略，包括各种锁机制、MVCC机制等。本文首先介绍HBase的两种基于锁实现的同步机制，再分别详细介绍行锁的实现以及各种读写锁的应用场景，最后重点介绍MVCC机制的实现策略
# 多线程并发写Redis
Redis是一种开源的高性能内存数据库，广泛应用于缓存、消息队列等场景。虽然Redis本身是单线程的，但我们可以通过多线程并发方式向Redis写入数据，以提高性能。本文将探讨如何实现这一目标，并提供代码示例与理论指导。
## 理论框架
Redis使用单线程来处理请求，这意味着每一次操作都是原子的，不会出现数据不一致的情况。然而，在高并发的情况下，这种方式可能成为性
原创
2024-09-05 04:01:29
295阅读
# 如何实现hbase多线程并发写
## 总体流程
首先，我们需要创建一个HBase表用于存储数据，然后编写多线程程序，并发写入HBase表。下面是整个流程的步骤表格：
```mermaid
gantt
title HBase多线程并发写流程
dateFormat YYYY-MM-DD
section 创建HBase表
创建HBase表
原创
2024-05-22 06:29:46
61阅读
# Python多线程写Excel实现流程
## 介绍
在Python中，使用多线程可以提高程序的执行效率。本文将教你如何使用Python多线程来写Excel文件。
## 实现步骤
下面是实现Python多线程写Excel的步骤：
步骤|操作
---|---
1|导入相关模块
2|创建Excel文件
3|创建多个线程
4|定义线程函数
5|启动线程和等待线程结束
6|保存Excel文件
原创
2024-01-16 06:56:43
73阅读
多线程安全问题线程安全问题的产生线程安全问题：单线程程序是不会出现线程安全问题多线程程序没有访问共享数据不会产生问题多线程访问了共享的数据，就会产出线程安全问题模拟卖票：创建三个线程，同时开启，对共享的票进行出售会发现当我们多个线访问同一个资源时，且多个线程中对资源有写的操作，就容易出现线程安全问题。(重复票与不存在票)要解决线程并发访问同一资源的安全性问题，也就是解决重复票与不存在票问题，Jav
转载
2023-09-01 09:27:40
65阅读
## 如何实现Java多线程写数据到Excel
作为一名经验丰富的开发者，我将教会你如何实现Java多线程写数据到Excel的操作。首先，让我们来看看整个流程。
### 流程图
```mermaid
journey
title Java多线程写数据到Excel流程
section 确定需求
section 创建Excel文件
section 多线程写数据
原创
2024-06-14 05:12:27
38阅读
1、进程和线程的区别进程是资源的分配和调度的一个独立单元，而线程是CPU调度的基本单元。一个进程可以包括多个线程，并且线程共享整个进程的资源（寄存器、堆栈、上下文），一个进程至少包括一个线程。2、并发（concurrency）与并行（parallellism）（1）并行是指俩个或者多个事件在同一时刻发生；而并发是指俩个或多个事件在同一时间间隔发生。（2）并行是在不同实体上的多个事件，并发是在同一个
转载
2023-12-25 15:02:50
62阅读
比如一款商城系统中风控模块中的敏感词库如果让用户一个一个的录入是非常不合理的设计，那么我们可以让用户在excel文件中编辑好的大量敏感词然后在系统中直接导入这样可以大大的提高用户体验。那么excel文件的数据有100W的大量数据我们该如何高效率的把这些数据导入到系统中呢？此时我们服务划分可以分为【风控中心微服、任务中心微服】用户导入数据时向【任务中心微服】发起请求由该服务分片解析文件后分片异步调用
转载
2023-09-13 21:46:29
126阅读
