tomcat 优化操作目的:通过优化tomcat提高网站的并发能力。配置tomcat管理员账户在conf/ tomcat-users.xml下添加用户：<role rolename="manager"/><role rolename="manager-gui"/><role rolename="admin"/><role rolename="admin-g
原创
2022-09-28 14:59:29
61阅读
IS NULL 或IS NOT NULL操作（判断字段是否为空）
转载
2021-08-30 21:47:00
392阅读
2评论
1 .MapReduce 跑的慢的原因1.1主要有两点：计算机性能 CPU、内存、磁盘、网络IO 操作优化数据倾斜 2）Map 和 Reduce 数目设置不合理 3）Map 时间过长，导致 Reduce 等待太久 4）小文件过多 5）大量的不可分块的超大文件 6）spill（溢写）次数过多 7）Merge 次数过多1.2 MapReduce 优化方法主要从六个方面考虑：数据输入，Map 阶段、Re
转载
2023-07-12 10:55:07
50阅读
1. MapReduce跑得慢的原因优化方法MapReduce优化方法主要从六个方面考虑：数据输入、Map阶段、Reduce阶段、IO传输、数据倾斜问题和常用的调优参数。数据输入Map阶段Reduce阶段I/O传输数据倾斜数据倾斜现象减小数据倾斜的方法常用的调优参数资源相关以下参数是在用户自己的MR应用程序中配置就可以生效（mapred-default.xml）配置参数参数说明mapreduce.
转载
2023-07-06 18:29:26
58阅读
一 缓存的收益与成本1.1 受益1 加速读写2 降低后端负载：后端服务器通过前端缓存降低负载，业务端使用redis降低后端mysql负载1.2 成本1 数据不一致：缓存层和数据层有时间窗口不一致，和更新策略有关2 代码维护成本：多了一层缓存逻辑3 运维成本：比如使用了Redis Cluster1.3 使用场景1 降低后端负载：对高消耗的sql，join结果集/分组统计的结果做缓存2 加速请求响应：
转载
2023-07-21 00:24:40
35阅读
MySQL GROUP BY 操作的优化
默认情况下， MySQL 在执行 GROUP BY col1 ， col2.... 操作的时候，会按照 GROUP BY 字段的顺序进行排序。如果显式包括一个包含相同的列的 ORDER BY 子句，则对 MySQL 的实际执行性能没有什么额外的影响。
如果查询包括 GROUP BY 操作， 但是不需要对结果进行排序，或者对默认的排序结果不
转载
精选
2011-08-21 16:45:34
1290阅读
2019/2/21星期四hive高级操作（优化，数据倾斜优化）分区表/桶表应用，skew，map-join//见hive的基本语法行列转换hive优化hive优化思想Explain的使用经典案例(distinctcount)数据倾斜的原因操作：关键词情形后果1、Join其中一个表较小，但是key集中分发到某一个或几个Reduce上的数据远高于平均值；2、大表与大表，但是分桶的判断字段0值或空值过多
原创
2019-02-21 10:38:03
6725阅读
点赞
hive的调优 1.Fetch 抓取 2.本地模式 3.表的优化 4.数据倾斜（准确来说是处理数据倾斜才是调优） 5.并行执行 6.严格模式 7.jvm重用 8.推测执行 9. 执行计划 10.虚拟列 11.压缩** *1.Fetch 抓取 目的： 设置某些查询，在不用计算的情况下，不去执行MR任务，而是直接抓取数据进行显示 None ： 禁用Fetch 如果设置为该参数则所有的查询都会运行MR任
先来认识2个redis配置参数hash-max-ziplist-entries : hash内部编码压缩列表的最大值，默认512hash-max-zipmap-value : hash内部编码压缩列表单个key的最大值，默认64字节。这是hash的配置，list，set，zset也有类似的配置参数。 先说结论：总结redis节约内存的方法。 1，使用对象共享池优化小
转载
2023-06-28 16:20:59
39阅读
smartbi报表
原创
2022-05-11 18:43:50
441阅读
点赞
1评论
# Java优化Set操作
在Java编程中，`Set`接口是一个非常重要的数据结构，它存储了一组不包含重复元素的集合。`Set`接口的实现类主要有`HashSet`、`LinkedHashSet`和`TreeSet`等。不同的实现类在性能上有所差异，选择合适的`Set`实现类可以显著提高程序的运行效率。
## 1. 选择合适的Set实现类
### 1.1 HashSet
`HashSet`
检查net.ipv4.tcp_tw当前值，将当前的值更改为1分钟： vi /etc/sysctl.conf # 控制开启LINUX的IP转发（0,1）
net.ipv4.ip_forward = 0 # 控制开启来源理由验证（0,1）
net.ipv4.conf.default.rp_filter = 1 # Do not accept
阻塞点1、集合全量查询和聚合操作；2、bigkey 删除；（删除key时，需要释放内存，为了高效管理，释放的内存需要加到内存管理链表，方便后续分配。）3、清空数据库；4、AOF 日志同步写；（rdb和aof重写都是子线程操作不会阻塞主线程，aof同步写大量key会造成redis阻塞）5、从库加载 RDB 文件。我们通过关键点和客户端需要返回的数据来判断，读取操作是不能异步进行的，所以集合全量查询和
转载
2023-05-25 14:52:25
66阅读
优化操作系统，希望可以帮助到大家！
原创
2017-05-15 17:17:41
764阅读
合理的title、description、keywords：搜索对着三项的权重逐个减小，title值强调重点即可，重要关键词出现不要超过2次，而且要靠前，不同页面title要有所不同；description把页面内容高度概括，长度合适，不可过分堆砌关键词，不同页面description有所不同；ke
转载
2017-12-04 09:05:00
176阅读
2评论
概述：程序访问优化也可以认为是访问SQL语句的优化，一个好的SQL语句是可以减少非常多的程序性能的，下面列出常用错误习惯，并且提出相应的解决方案 一、操作符优化 1. IN、NOT IN 操作符 IN和EXISTS 性能有外表和内表区分的，但是在大数据量的表中用EXISTS 代替IN 。 Not ...
转载
2021-09-28 15:44:00
155阅读
2评论
优化Refresh时间ES在写入数据的时候，采用延迟写入的策略，数据会先写到内存中，当超过默认时间1秒 （index.refresh_interval，默认）会进行一次写入磁盘操作。如果对实时搜索要求不高的情况下，可以适当地将此值设置的高点，可以有效地减少 segment (一个segment是一个完备的lucene倒排索引，而倒排索引是通过词典(Term Dictionary)到文档列表(Pos
转载
2023-05-11 11:47:49
231阅读
操作系统优化
原创
2009-02-16 16:20:26
344阅读
一、背景 在Mybatis经常会使用批量操作，比如大数据的批量查询，批量插入，如果直接查询，非常有可能发生OOM，解决思路一般使用内存队列，小批量加载，处理完再加载下一批次 二、优化 2.1 批...
原创
2022-10-08 10:40:45
182阅读
yum更新 #yum grouplist #yum groupinstall " "#yum upgrade # yum updateyum -y update升级所有包，改变软件设置和系统设置,系统版本内核都升级yum -y upgrade升级所有包，不改变软件设置和系统设置，系统版本
原创
2016-03-29 11:44:45
757阅读
