I/O：输入/输出(Input/Output)，分为IO设备和IO接口两个部分。在POSIX兼容的系统上，例如Linux系统，I/O操作可以有多种方式，比如DIO(Direct I/O)，AIO(Asynchronous I/O， 异步I/O)，Memory-Mapped I/O(内存映射I/O)等，不同的I/O方式有不同的实现方式和性能，在不同的应用中可以按情况选择不同的I/O方式。
原创
2021-11-15 09:58:46
332阅读
在Java编程中，直接I/O的堆外内存管理是一个关键的性能优化点，掌握此技术可以使你的应用更加高效。在这篇博文中，我将详细介绍如何解决“Java 直接I/O 堆外”的问题，涉及环境准备、集成步骤、配置详解、实战应用、排错指南及性能优化等结构。
## 环境准备
首先，我们需要准备一个兼容的技术栈。在选择技术栈时，确保所使用的Java版本、框架及其他依赖都能够协同工作是至关重要的。
| 技术栈
缓存IO和直接IO缓存IO：数据从磁盘先通过DMA copy到内核空间，再从内核空间通过cpu copy到用户空间直接IO：数据从磁盘通过DMA copy到用户空间缓存IO缓存IO又被称为标准IO，大多数文件系统的默认IO操作都是缓存IO 在Linux的缓存IO机制中吗，数据先从磁盘复制到内核空间的缓冲区，然后从内核空间缓冲区复制到应用程序的地址空间。读操作
操作系统检查内核的缓冲区有没有需要的数
转载
2023-10-28 11:58:39
56阅读
注：在java中当我们讨论NIO/IO的时候，通常指的是网络I/O，不过本文我们主要讨论文件I/O，他们本质上没有太大差别，对于Java NIO的讨论，可以参见java nio深入理解之MMAP与ByteBuffer、DirectBuffer。 在实际工作中，绝大多数业务开发是不需要太多关心I/O机
原创
2021-07-20 09:49:49
2080阅读
# 使用Java IO流直接写入xls文件
在Java开发中，我们经常需要生成和操作Excel文件。通常情况下，我们会使用POI库来进行Excel文件的读写操作。但是，有时候我们也可以使用Java的IO流直接写入xls文件。在本文中，我们将介绍如何使用Java IO流来直接写入xls文件，并给出相应的代码示例。
## Java IO流简介
Java IO流是Java编程中用于处理输入输出数据
原创
2024-02-24 07:53:49
117阅读
以下内容仅表示自己的学习笔记，对其中一些知识的见解，防止遗忘，不喜勿喷。错误之处，欢迎发邮箱指导：738254743@qq.com 阻塞：没有获得资源则进程挂起，直到获取资源为止。挂起进程进入睡眠状态，给调度的等待队列移走，直到等待条件满足。非阻塞：操作设备部不挂起，或放弃，或反复查询。非阻塞和阻塞区别：非阻塞：不断查询，消耗CPU；阻塞时进程进入休眠状态，将CPU资源让给其他资源阻塞唤醒：1，唤
原创
2015-06-20 00:06:42
1323阅读
Linux 磁盘 I/O 工作分三层： 设备层、通用块层 和 文件系统层一、设备层 也就是 磁盘。磁盘可以分为两类：机械磁盘和固态磁盘。1. 机械磁盘：缩写为 HDD。 I/O 请求连续，就不需要磁道寻址，可以获得最佳性能。 随机 I/O，需要不停地移动磁头，读写速度就会比较慢。
转载
2024-06-12 23:12:16
38阅读
Linux IO （Input/Output）系统提供了一种在Linux操作系统上进行输入和输出操作的方式。其中，红帽公司的Linux发行版作为业界一流的操作系统之一，也具有强大的IO特性。下面我们来聊一聊Linux IO在红帽系统上的应用情况。
首先，Linux IO系统采用一种基于文件的IO模型，即在Linux系统中一切皆文件的思想。这意味着无论是网络通信、外设操作还是进程间通信，都可以通过
原创
2024-03-14 09:55:06
119阅读
监控io性能iostat命令被用于监视系统输入输出设备和CPU的使用情况。它的特点是汇报磁盘活动统计情况，同时也会汇报出CPU使用情况。同vmstat一样，iostat也有一个弱点，就是它不能对某个进程进行深入分析，仅对系统的整体情况进行分析iostat -x说明： util%：表示io等待占比，正常情况下该值和磁盘读写（r/w）成正比，如果该值很大，读写数值很小则说明磁盘存在问题，系统
转载
2024-04-24 23:56:46
237阅读
每个块设备或者块设备的分区，都对应有自身的请求队列(request_queue),而每个请求队列都可以选择一个I/O调度器来协调所递交的request。I/O调度器的基本目的是将请求按照它们对应在块设备上的扇区号进行排列，以减少磁头的移动，提高效率。每个设备的请求队列里的请求将按顺序被响应。实际上，
转载
2019-03-19 10:12:00
150阅读
2评论
1、首先使用vmstat 观察wa(wait IO)，如果wa 不断增大，保持在50以上的水位，说明有大量的IO。2、从top也可以观察wa(wait IO)值的变化，而且可以根据top观察那个进程的cpu占有率高，占用CPU时长多(从TIME中可以看出)，来判断那个进程不断的进行IO操作。例如：在NFS中运行应用程序，链接大小很大的动态库，比如40M，程序在第一次运行的时候，需要从网络加载动态库
转载
2024-05-08 13:35:59
240阅读
三十、监控IO性能、free命令、ps命令、netstat查看网络状态、Linux下抓包一、监控IO性能CPU、内存有剩余，但是系统负载还是很高，用vmstat查看发现b列或者wa列比较大，就说明磁盘有问题，那么就要更详细的查看磁盘。
iostat命令：在安装sysstat包时就会安装此命令。
用法：可以直接输入查看，也可以加数字1，类似vmstat。
# iostat
Linux 3.10.0-
转载
2024-07-25 12:19:53
110阅读
磁盘IO的几种访问方式如下：缓存IO 缓存I/O又被称作标准I/O，大多数文件系统的默认I/O操作都是缓存I/O。在Linux的缓存I/O机制中，数据先从磁盘复制到内核空间的缓冲区，然后从内核空间缓冲区复制到应用程序的地址空间。 读操作：操作系统检查内核的缓冲区有没有需要的数据，如果已经缓存了，
转载
2023-07-25 09:42:50
100阅读
一.Input和Output 1.stream代表的是任何有能力产出数据的数据源，或是任何有能力接收数据的接收源。 在Java的IO中，所有的stream（包括Input和Out stream）都包括两种类型： 1.1 以字节为导向的stream 以字节为导向的stream，表示以字节为单位从stream中读取或往stream中写入信息。以字节为导向的stream包括下面几种类型： 1) inpu
直接文件IO与其他现代操作系统内核一样，Linux内核实现了一个复杂的缓存、缓冲以及设备和应用之间的I/O管理的层次结构。一个高性能应用可能希望越过这些复杂的层次结构并进行独立的I/O管理，如数据库系统，比较倾向于使用他们自己的缓存机制，以尽可能的减少操作系统的影响。系统提供O_DIRECT标志给open系统调用，会绕过内核的页面缓存，直接启动用户空间的缓冲区与设备之间的IO，所有IO将会同步，直
原创
2018-01-08 09:57:58
2556阅读
块做为文件系统的抽象，它是I/O中最基本的概念——所有的磁盘操作都是基于块进行的。因此，当请求以块大小整数倍对齐地址时，I/O效率是最理想的。操作效率随着系统调用次数的增多而急剧下降，例如，每次读一字节读1024次与一次读1024字节相比，显然后者效率更优。如果长度不是block的整数倍，即使每次以大于块的长度进行一系列的操作，其效率也不是最理想的。例如块的大小是1K,每次以1130字节的长度操作
原创
2018-01-03 09:24:01
2184阅读
Linux内核实现I/O主要在三个内核子系统：虚拟文件系统（VFS)，页缓存，和页回写。虚拟文件系统(有时也叫做virtualfileswitch)是一种Linux内核的文件操作的抽象机制。它允许内核在无需了解文件系统类型的情况下，使用文件系统函数和操作文件系统数据。VFS实现这种抽象的方法是使用一种通用文件模型，它是所有Linux文件系统的基础。基于函数指针和各种面向对象方法，通用文件模型提供了
原创
2018-01-15 09:36:52
2337阅读
1,什么是文件任何一个进程在对文件进行读写操作前，都需要先打开该文件。操作系统内核为每个进程维护一个打开文件的列表，该列表是一个指针数组，指向每个打开文件的元数据，其中包括指向文件inode的内存拷贝，文件位置和访问模式等)，数组的索引即文件描述符(filedescriptors)，进程通过文件描述符即可进行文件的读写。同其他所有类Unix系统一样，Linux也本着“一切皆文件”的设计原则。除了保
原创
2017-12-28 12:59:38
2115阅读
Linux系统出现了性能问题，一般我们可以通过top、iostat、free、vmstat等命令来查看初步定位问题。其中iostat可以给我们提供丰富的IO状态数据。关于Linux性能监控相信大家已经小有了解，对于IO篇，让我们先分析一些具体的情况，在这些情况下I/O会成为系统的瓶颈。我们会用到工具top，vmstat，iostat，sar等。每一个工具的输出都从不同的方面反映除系统的性能情况。&
转载
2024-03-20 12:46:10
72阅读
2020-03-27关键字： 在 Linux 内核开发，通常是嵌入式领域的内核开发过程中，难免会有需要访问文件系统中的文件的需求。 但 Linux 内核中可没有像在用户态那样有文件IO和标准IO可以直接对文件进行 open()/fopen() , read()/fread() , write()/fwrite() , close()/fclose() 操作。 不过所幸
转载
2024-03-27 20:49:54
60阅读
