一、通用优化 1.1、NameNode 的元数据备份使用 SSD 1.2、定时备份 NameNode 上的元数据 建议每小时或者每天备份,如果数据极其重要,可以5~10分钟备份一次。备份可以通过定时任务复制元数据目录即可。 1.3、为 NameNode 指定多个元数据目录 使用 dfs.name.d
转载 2020-05-30 20:21:00
178阅读
2评论
1 什么是约瑟夫问题约瑟夫环是一个数学的应用问题:已知n个人(以编号1,2,3...n分别表示)围坐在一张圆桌周围。从编号为k的人开始报数,数到m的那个人出列;他的下一个人又从1开始报数,数到m的那个人又出列;依此规律重复下去,直到圆桌周围的人全部出列。 2 如何求最后一个出列的人 1、模拟方法 2、数学方法 3 模拟方法 模拟方法就是所谓的一个个模拟,一个一个出列。这个方法比较多,可以直接用数组模拟,也可以直接建一个循环链表模拟, 总之这个很好实现,但是复杂度却是O(nm),如果n和m都是10000,要求1s计算出结果,估计就不行了。 这个算法实现,网上一大堆:随便给出两...
转载 2013-08-06 18:03:00
153阅读
前言今天我们来讲讲如何优化MySQL的性能,主要从索引方面优化。下期文章讲讲MySQL慢查询日志,我们是依据慢查询日志来判断哪条SQL语句有问题,然后在进行优化,敬请期待MySQL慢查询日志篇建表// 建表 CREATE TABLE IF NOT EXISTS staffs(     id INT PRIMARY KEY AUTO_INCREMENT,     name VARCHAR(24) N
转载 2021-01-29 10:26:46
729阅读
2评论
这篇文章主要聊三个话题: 1. 页面优化 2. URL优化 3. 内部链接优化 这三个 SEO 优化方案属于「站内优化」,是每一位站长够得到摸得着的优化方案,对比效果不确定的站外优化,站内优化的性价比极高! URL 优化 「URL优化」非常重要,因为 URL 可以帮助搜索者了解页面的主题。当然,搜索者可以是用户也可以是搜索引擎。 做网页 URL 设计应当考虑两件事情: 1. 可读性 2. 关键词
在掌握内存相关的背景知识后,下一步你肯定想着手开始优化内存的问题了。不过在真正开始做内存优化之前,需要先评估内存对应用性能的影响,我们可以通过崩溃中“异常退出” 和 OOM 的比例进行评估。另一方面,低内存设备更容易出现内存不足引起的异常和卡顿,我们也可以通过查看应用中用户的手机内存在 2GB 以下所占的比例来评估。所以在优化前要先定好自己的目标,这一点非常关键。比如针对 512MB 的设备和针对
一、通用优化1.1、NameNode 的元数据备份使用 SSD1.2、定时备份 NameNode 上的元数据1.3、为 NameNode 指定多个元数据目录1.4、设置 dfs.namenode.name.dir.restore 为 true1.5、NameNode 节点必须配置为 Raid1(镜像
转载 2019-03-18 11:49:00
218阅读
2评论
优化实战策略1.尽量全值匹配CREATE TABLE `staffs`( id int primary key auto_increment, nat null d...
原创 2022-11-30 14:21:26
119阅读
1、分析 (1)小表永远驱动大表 (2)order by关键字优化 小总结: 默认的 age 和birth默认是升,全升和全降不可以,升降或者降生造成filesort ...
转载 2021-07-20 18:56:00
605阅读
2评论
优化OpenGL ES 应用 (2)9.1.8 飞行/动态分支中的线程9.1.9 Pack着色器插值器9.1.10 最小化着色器GPR的使用9.1.11 最小化着色器指令数9.1.12 避免使用Uber着色器9.1.13 避免对着色器常数进行数学运算9.1.14 避免丢弃片段着色器中的像素9.1.15 避免在片段着色器中修改深度9.1.16 避免在顶点着色器中获取纹理9.1.17 Break u
一.Fetch 抓取set hive.fetch.task.conversion=none/more(默认值);默认
原创 2022-07-02 00:07:18
83阅读
对于大型的网站系统,数据库的优化关系到网站访问速度,和客户的体验,下面是我从网上找的一篇有关数据库优化的文章,红色显示的是我认为比较重要的。 本文首先讨论了基于第三范式的数据库表的基本设计,着重论述了建立主键和索引的策略和方案,然后从数据库表的扩展设计和库表对象的放置等角度概述了数据库管理系统的优化方案。 关键词: 优化(Optimizing) 第三范式(3NF) 冗余数据(Redundant
性能优化(Optimize)是在保证系统正确性的前提下,能够更快速响应请求的一种手段。有些性能问题,比如慢查询等,如果积累到一定的程度或者是遇到急速上升的并发请求之后,会导致严重的后果,轻则造成服务繁忙,重则导致应用不可用。就像一颗即将被引爆的定时炸弹,时刻威胁着我们。因此在上线项目之前需要严格的把关,以确保 MySQL 能够以最优的状态进行运行。同时,在面试中关于 MySQL 优化的知识点,都是
在MySQL中的ORDER BY有两种排序实现方式: 1、利用有序索引获取有序数据 2、文件排序 在使用explain分析查询的时候,利用有序索引获取有序数据显示Using index。而文件排序显示Using filesort。   1.利用有序索引获取有序数据 取出满足过滤条件作为排序条件的字段,以及可以直接定位到行数据的行指针信息,在 Sort Buffer 中进行实际的排序操作,然后利用排
转载 2016-01-20 14:28:00
200阅读
2评论
高质量的CSS代码体现在三个方面:可读性和可维护性和高性能。对于“前端工程师”来说如何平衡“追求高性能”和“可维护性”是很值得思考的问题。 在本次博客中,将从以下八个方面来学习CSS性能优化中的各种技巧,以便自己将来可能用到好查阅,也分享给广大学习前端的小白朋友们。 (1)属性缩写 (2)语法压缩 (3)图片压缩 (4)选择器优化 ...
原创 2021-06-01 11:40:42
675阅读
优化简单介绍 mysql优化是多方面的。原则是降低系统的瓶颈,降低资源的占用。添加系统的反应速度。比如,通过优化文件系统。提高磁盘I/O的读写速度;通过优化操作系统
转载 2017-05-29 09:14:00
169阅读
2评论
1.搭建 Spark 集群的时候要给 Spark 集群足够的资源(core, memory)在 spark 安装包的 conf 下 spark-env.shSPARK_WORKER_CORES
原创 2022-07-01 17:28:46
80阅读
1、优化简介mysql优化是多方面的,原则是减少系统的瓶颈,减少资源的占用,增加系统的反应速度。例如,通过优化文件系统,提高磁盘I/O的读写速度;通过优化操作系统调度策略,提高mysql在高负荷情况下的负载能力;优化表结构、索引、查询语句等使查询响应更快在mysql中,可以使用show status语句查询一些mysql的性能参数show status like 'value';其中v
原创 2015-07-07 21:09:19
506阅读
1、优化简介mysql优化是多方面的,原则是减少系统的瓶颈,减少资源的占用,增加系统的反应速度。例如,通过优化文件系统,提高磁盘I/O的读写速度;通过优化操作系统调度策略,提高mysql在高负荷情况下的负载能力;
原创 2022-04-22 15:05:11
290阅读
1.int型子查询陷阱 如下两个表: 2表的数据量: 要求查询班级名称是'3'的学生? 1.用in查询: 花费了0.17秒,用explain分析语句:发现也是class表是全局扫描,user表用了class_id索引。 解释:我们理解的是先查询in里面的班级编号,然后利用班级编号去查询外面的id和n
原创 2021-07-15 09:54:52
363阅读
  • 1
  • 2
  • 3
  • 4
  • 5