Java代码中性能优化方式及网络优化，包括缓存、异步、延迟、数据存储、算法、JNI、逻辑等优化方式。(时间仓促，后面还会继续完善^_*) 目前性能优化专题已完成以下部分： 性能优化总纲——性能问题及性能调优方式 性能优化第四篇——移动网络优化 性能优化第三篇——Java(Android)代码优化性能优化第二篇——布局优化性能优化第一篇——数据库性能优化 性能优化实例1、降低执行时间
少优化->多优化： O0 -->> O1 -->> O2 -->> O3 -O0表示没有优化,-O1为缺省值，-O3优化级别最高 英文解析： `-O '
`-O1 '
Optimize. Optimizing compilation takes somewhat more time, and a
lot more m
转载
2023-09-15 14:30:41
86阅读
目录1.GC触发过程2.过程详解2.1GCdebt2.2stepmul2.3pause3.总结参考资料 在我的上一篇文章《Lua5.3版GC机制的学习理解》的4.2部分GC触发条件中，对这部分内容粗略的解释为：LuaGC是当lua使用的内存到达阀值时，自动触发。那么这篇文章将对这句描述，进行进一步的理解，并探讨一些GC参数的调节问题。 1.GC触发过程1. lua在每次分配新的内存时，会主动检
转载
2024-05-28 19:30:16
64阅读
内存优化篇memory、GC、PerformanceGC(Garbage Collection)：垃圾回收是jvm提供的一种垃圾回收机制，回收的是无任何对象引用指向的内存空间。垃圾回收释放的是对象占据的内存(一般为堆内存)；一般在程序空闲时间不定时回收。java中的对象引用：强引用(Strong Reference)：如Object obj = new Object()，只要对象还存在，对象引用的
避免建立对象代码流程优化 在if语句中判断是否创建对象对象声明技巧 在使用Vector时，建议初始化时声明其大小Vector v = new Vector(40);
//or
Vector v = new Vector(40,25);不要多次声明对象 建议这样的写法：public class x{
private Vector v;
public x(){
v
转载
2024-04-08 12:06:22
58阅读
# Hadoop GC 优化指南
在大数据处理领域，Hadoop 是一种广泛使用的框架。随着系统的复杂性增加，垃圾回收（GC）成为优化性能的重要因素。本篇文章将指导你如何在 Hadoop 中进行 GC 优化，帮助你提升任务的执行效率。
## 优化流程
下面是优化 Hadoop GC 的基本流程。请遵循以下步骤来完成优化。
| 步骤 | 说明
原创
2024-09-18 05:45:09
91阅读
点击上方蓝字关注我们！本文由CrowHawk翻译，地址：如何优化Java GC「译」，是Java GC调优的经典佳作。Sangmin Lee发表在Cubrid上的”Become a Ja...
转载
2023-04-28 19:06:12
187阅读
一、前言大多数Spark作业的性能主要就是消耗在了shuffle环节，因为该环节包含了大量的磁盘IO、序列化、网络数据传输等操作。二、相关参数及优化建议1.spark.shuffle.file.buffer默认值： 32KB 参数说明： 该参数用于设置shuffle write task的BufferedOutputStream的buffer缓冲大小。将数据写到磁盘文件之前，会先写入buffer缓
转载
2023-10-10 07:25:06
102阅读
代码优化的目标是： 1、减小代码的体积 2、提高代码运行的效率代码优化细节1、尽量指定类、方法的final修饰符 带有final修饰符的类是不可派生的。在Java核心API中，有许多应用final的例子，例如java.lang.String，整个类都是final的。为类指定final修饰符可以让类不可以被继承，为方法指定final修饰符可以让方法不可以被重写。如果指定了一个类为final，则该类所
转载
2023-07-11 20:27:58
9阅读
集群环境集群环境可以看到集群一个有280G内存，120核数，5个节点spark-submit--启动命令含义：spark-submit classcn.dmp.tools.Bzip2Parquet\类的main方法所在类--master yarn--deploy-mode cluster \ 运行模式--driver-memory 4g \共280g...
原创
2021-07-14 15:30:37
995阅读
protobuf-net是Unity3D游戏开发中被广泛使用的Google Protocol Buffer库的c#版本，之所以c#版本被广泛使用，是因为c++版本的源代码不支持Unity3D游戏在各个平台上的动态库构建。它是一个网络传输层协议，在GC上有很大的问题，本文对它进行了一次比较彻底的GC优化。从protobuf-net产生GC分析，到给出优化方案，到最后
转载
2024-03-27 20:29:55
59阅读
上篇文章主要分析了一下JVM和GC算法等理论，这篇主要就是实战。GC的目标1.1、GC优化是必要的吗事实上GC优化对Java基础服务来说在有些场合是可以省去的，但前提是这些正在运行的Java系统，必须包含以下参数或行为： 内存大小已经通过-Xms和-Xmx参数指定过 运行在server模式下（使用-server参数） 系统中没有残留超时日志之类的错误日志我们GC优化的
转载
2023-07-16 02:24:43
55阅读
2 Hadoop优化2.1 MapReduce跑的慢的原因计算机性能：CPU、内存、磁盘健康、网络I/O操作优化：
数据倾斜Map和Reduce数设置不合理Map运行时间太长，导致Reduce等待过久小文件过多大量的不可切片的超大压缩文件split次数过多merge次数过多2.2 MapReduce优化方法①数据输入合并小文件大量的小文件会产生大量的map任务，增大了map的装载次数，而任
转载
2023-10-03 19:30:22
119阅读
# Spark 优化频繁 GC 的完整指南
频繁的垃圾回收（GC）会显著影响 Apache Spark 的性能，导致任务运行缓慢或失败。本文将为初学者详细讲解如何优化 Spark 应用程序以减少 GC 的频率，并提供一套完整的步骤、代码示例以及相应的注释。最终还会绘制旅行图和关系图，帮助理解这一过程。
## 优化流程
以下是优化 Spark 应用程序以减少 GC 的流程：
| 步骤 | 描
# Java GC的优化
Java作为一种广泛应用的编程语言，内存管理是其核心组成部分之一。Java的内存管理依赖于垃圾回收（GC）机制，以自动回收不再使用的对象，从而减少内存泄漏。尽管Java的GC为开发者提供了便利，但在高负载和性能要求的场景中，合理地优化GC是至关重要的。本文将探讨Java GC的优化，提供一些代码示例，帮助开发者更有效地管理内存。
## 什么是垃圾回收？
垃圾回收（G
原创
2024-10-25 05:57:37
16阅读
GC算法与种类1.引用计数法(java中已经不用了)引用计数器的实现很简单，对于一个对象A，只要有任何一个对象引用了A，则A的引用计数器就加1，当引用失效时，引用计数器就减1。只要对象A的引用计数器的值为0，则对象A就不可能再被使用。 问题：–引用和去引用伴随加法和减法，影响性能–很难处理循环引用2.标记-清除法在标记阶段，首先通过根节点，标记所有从根节点开始的可达对象。因此，未被标记的
转载
2023-08-18 20:40:33
55阅读
媒介想写一篇关于android GC的设法主意来源竽暌冠追查一个魅族手机图片滑动卡顿问题，因为赓续的GC导致的丢帧卡顿的问题让我们想了很多筹划去解决，所以就计算具体的看看内存分派和GC的道理，为什么会赓续的GC，GC ALLOC和GC COCURRENT有什么差别，能不克不及想办法扩大年夜堆内存削减GC的频次等等。1.1 收受接收算法标记收受接收算法(Mark and Sweep GC)其实2者最
转载
2023-07-28 17:40:08
102阅读
GC优化前段时间被面试官问到一个问题，“Unity3D游戏开发中如何减少gc”，憋了半天只说出几个C#中的技巧和对象池，感觉没说到点子上，开篇博客整理下，有新的就不定期更新。unity基于mono运行时，mono运行时的垃圾回收应该和CLR差不多(基于代的引用追踪算法)，都是符合.Net规范的，即使是il2cpp也有一套垃圾回收机制在里面(gc.cpp)。gc操作也是一个比较耗时的操作，本以为gc
转载
2024-06-16 21:26:54
95阅读
zookeeper.session.timeout默认值：3分钟(180000ms)说明：RegionServer与Zookeeper间的连接超时时间。当超时时间到后，ReigonServer会被Zookeeper从RS集群清单中移除，HMaster收到移除通知后，会对这台server负责的regions重新balance，让其他存活的RegionServer接管.调优：这个timeout决定了R
转载
2024-06-07 22:14:59
84阅读
一、表的设计优化1.1、提前创建region分区默认情况下，在创建HBase表的时候会自动创建一个region分区，当导入数据的时候，所有的HBase客户端都向这一个region写数据，直到这个region足够大了才进行切分。一种可以加快批量写入速度的方法是通过预先创建一些空的regions，这样当数据写入HBase时，会按照region分区情况，在集群内做数据的负载均衡。1.2、rowKey 优
转载
2023-07-11 20:19:25
100阅读
