小叔叔书的博客_canal,网络,elasticsearch(6)

使用工具分析慢查询日志

Query_time、Rows_examined、Rows_sent这3个信息让我们看到了查询需要优化什么。查询时间最长的SQL往往是最需要优化的，如果检查了大量记录（Rows_examined），而只返回很小的结果集（Rows_sent），往往也意味着存在不良SQL。但在一个高并发的数据库服务上，或者在做压力测试时，如果发现慢查询日志增长得非常快，很难筛选和查找里面的信息，那么在这种情况下，有如...

mysql

慢查询

响应时间

sql语句

oracle

转载 2021-08-10 10:02:35 664 阅读

ERROR 1418 (HY000) at line 4416: This function has none of DETERMINISTIC, NO SQL, or READS SQL DAT

1.问题：导入时报错 [root@yunother1 ~]# mysql -uroot -p </root/20190107Enter password: ERROR 1418 (HY000) at line 4416: This function has none of DETERMINISTIC, NO SQL, or READS SQL DATA in its declaratio

子程序

sql

服务器

数据

mysql

转载 2021-08-10 10:02:34 83 阅读

总结libevent安装方法

1.先用：ls -al /usr/lib | grep libevent 查看是否已安装，如果已安装且版本低于1.3，则先通过：rpm -e libevent —nodeps 进行卸载。2.下载libevent安装包：libevent-1.4.13-stable.tar.gz，然后解压。3.切换到解压后的 libevent 主目录：cd libevent-1.4.13-stable4.依次执行：...

安装包

软连接

主目录

程序运行

IT

转载 2021-08-10 10:02:33 1224 阅读

取消RHEL的注册提醒

使用RHEL做实验，但是总会时不时的在屏幕上弹出一个提醒你注册的窗口，特别影响心情。要不要去注册呢？不用啊，除非你钱多的没地方花了。注册了可以得到Redhat公司的技术支持和升级服务，除非是商业应用环境下花钱买个放心，否则根本用不到。能不能取消这个恼人的提醒呢，可以的。[root@localhost yum.repos.d]# yum list all | grep subscriptionLoa...

商业

应用环境

技术支持

做实验

IT

转载 2021-08-10 10:02:31 764 阅读

pandas.DataFrame.head

DataFrame.head(n=5)[source]Return the first n rows.This function returns the first n rows for the object based on position. It is useful for quickly testing if your object has the right type of da...

sed

IT

转载 2021-08-10 10:02:30 140 阅读

配置iptables,把80端口转到8080

在Linux的下面部署了tomcat，为了安全我们使用非root用户进行启动，但是在域名绑定时无法直接访问80端口号。众所周知，在unix下，非root用户不能监听1024以上的端口号，这个tomcat服务器就没办法绑定在80端口下。所以这里需要使用linux的端口转发机制，把到80端口的服务请求都转到8080端口上。在root账户下面运行一下命令： 1 ...

80端口

linux

root用户

tomcat

直接访问

转载 2021-08-10 10:02:28 1013 阅读

Postgres数据库忘记密码,三个步骤解决

核心提示：Postgres数据库忘记密码,三个步骤解决Postgres数据库忘记密码,三个步骤解决一、修改data目录下的 pg_hba conf 文件将以下这行host all all 127 0 0 1 32 md5改为如下Postgres数据库忘记密码,三个步骤解决Postgres数据库忘记密码,三个步骤解决一、修改data目录下的 pg_hba.conf 文件将以下这行...

忘记密码

数据库

重新启动

sql

IT

转载 2021-08-10 10:02:26 587 阅读

安装、配置、启动、操作、关闭Redis

一.在Linux上安装RedisRedis能够兼容绝大部分的POSIX系统，例如Linux、OS X、OpenBSD、NetBSD和FreeBSD，其中比较典型的是Linux操作系统（例如CentOS、Redhat、Ubuntu、Debian、OS X等）。在Linux安装软件通常有两种方法，第一种是通过各个操作系统的软件管理软件进行安装，例如CentOS有yum管理工具，Ubuntu有apt...

redis

配置文件

持久化

可执行文件

客户端

转载 2021-08-10 10:02:24 117 阅读

Innodb与Myisam引擎的区别与应用场景

1. 区别：（1）事务处理：MyISAM是非事务安全型的，而InnoDB是事务安全型的（支持事务处理等高级处理）；（2）锁机制不同：MyISAM是表级锁，而InnoDB是行级锁；（3）select ,update ,insert ,delete 操作：MyISAM：如果执行大量的SELECT，MyISAM是更好的选择InnoDB：如果你的数据执行大量的INSERT或UP...

外键

事务处理

跨平台

数据

缓存

转载 2021-08-10 10:02:22 478 阅读

Cache和Buffer的区别

结合文章：RAM、ROM、高速缓冲存储区别与联系内存在电脑中起着举足轻重的作用。内存一般采用半导体存储单元，包括随机存储器（RAM），只读存储器（ROM），以及高速缓存（CACHE）。只不过因为RAM是其中最重要的存储器，所以通常所说的内存即指电脑系统中的RAM。 RAM要求每时每刻都不断地供电，否则数据会丢失。如果在关闭电源以后RAM中的数据也不丢失就好了，这样就可以在每一次开机...

数据

缓存

读取数据

字段

磁盘缓存

转载 2021-08-10 10:02:21 371 阅读

sqlplus格式化输出

SQL> set linesize 100 SQL> col parameter for a40 SQL> col value for a40 set linesize 100 ；//输出一行字符个数为100set pagesize 300； //输出每页行数为300，缺省为24,为了避免分页，可设定为0。除了上面的还有以下是常用的。set feed off ；//不显本

sql

重定向

分页

原创 2021-08-10 10:02:20 678 阅读

使用动态SQL语句实现简单的行列转置（动态产生列）

原始数据如下图所示：（商品的销售明细）date=业务日期；Item=商品名称；saleqty=销售数量；-- 建立测试数据（表）create table test (Date varchar(10), item char(10),saleqty int)insert test values('2010-01-01','AAA',8)insert test values('2010-01...

数据

sql语句

原始数据

测试数据

sql

原创 2021-08-10 10:02:18 412 阅读

常见三种存储方式DAS、NAS、SAN的架构及比较

随着主机、磁盘、网络等技术的发展，数据存储的方式和架构也在一直不停改变，本文主要介绍目前主流的存储架构。存储的分类根据服务器类型分为：封闭系统的存储（封闭系统主要指大型机）开放系统的存储（开放系统指基于Windows、UNIX、Linux等操作系统的服务器）开放系统的存储分为：内置存储和外挂存储；外挂存储根据连接的方式分为：直连式存储（Direct-Attached Stor...

服务器

解决方案

数据

数据访问

开放系统

转载 2021-08-10 10:02:18 508 阅读

sqlnet.ora文件解析

1.1 SQLNET.AUTHENTICATION_SERVICES连接数据库时，提示的是ORA-01017:用户名密码出错ERROR:ORA-01017: invalid username/password; logon denied首先去检查下sqlnet.ora文件下是否有SQLNET.AUTHENTICATION_SERVICES= (NTS)设置，如何已经配置了...

oracle

sql

客户端

linux

用户名

原创 2021-08-10 10:02:16 483 阅读

动手为王——6种降低高水位方法，详细验证步骤

降低高水位方法1. movea.move不但可以重置水位线（HWM），解决松散表带来的 IO 浪费，还可以解决表中的行迁移问题；b.move可以将表移动到其他表空间，也可以在原表空移动，这样可以一定程度解决表空间碎片；c.如果表空间上有大量表、索引被 drop（或者 truncate），导致表空间前半部分出现大量空闲空间，可以通过 move 将靠后的表移动到前面的空闲空间，从而收缩...

表空间

oracle

sql

sed

数据

转载 2021-08-10 10:02:16 2345 阅读

redo日志文件组的三种状态(current,active,inactive)

以下内容是我从自己的测试环境中查询出来的在线重做日志信息：SQL> select * from v$log; GROUP# THREAD# SEQUENCE# BYTES MEMBERS ARC STATUS FIRST_CHANGE# FIRST_TIM---------- ---------- ---------- -----...

日志文件

重做

hive

oracle

重做日志

转载 2021-08-10 10:02:14 777 阅读

plsql中文乱码问题

原因：本机没有配置数据库字符集环境变量，或是与数据库字符集不一致。步骤一：执行在plsql中执行 select userenv('language') from dual; 语句来查看本机的字符集，或是执行select * from V$NLS_PARAMETERS; 语句。两者的区别是第一种查看到的是拼接好的一条字符集数据，第二种是数据库详细配置参数有多条数据需要将第一行，第二行，第九行...

数据

数据库

环境变量

重启

sql

原创 2021-08-10 10:02:14 456 阅读

慢查询阻塞了xtrabackup进而阻塞以后的sql导致的系统瘫痪问题

收到开发反应一库的sql频繁超时，系统几乎瘫痪，无法执行任何操作，我登上库先查看到当前的线程，发现有大量的线程状态是Waiting for table flush查看当前的事务从昨天开始执行，到今天早晨还没执行完，具体原因还没深究，先将此线程释放，然后备份才可以flush table成功继而备份完成后后面一系列被阻塞的sql都得以正常运行mysql> select...

mysql

sql

序列号

正常运行

sed

原创 2021-08-10 10:02:12 311 阅读

ASH、AWR、ADDM区别联系

========================================================================================================= 概念知识梳理======================================================...

sql

数据库

数据

oracle

sql语句

转载 2021-08-10 10:02:12 340 阅读

Hard Parse&Soft Parse

DDL每次执行都需要进行硬解析。 SQL 解析过程Oracle对此SQL将进行几个步骤的处理过程：1、语法检查(syntax check): 检查此sql的拼写是否语法。2、语义检查(semantic check): 诸如检查sql语句中的访问对象是否存在及该用户是否具备相应的权限。3、对sql语句进行解析(prase): 利用内部算法对sql进行解析，生成解析树(pars...

sql

oracle

sql语句

sed

执行计划

转载 2021-08-10 10:02:10 203 阅读

ubuntu 16.04 安装 PostgreSQL-9.6 及用pgadmin4连接测试

PostgreSQL 简介PostgreSQL是一款强大的高性能的对象关系型数据库管理系统（ORDB`

postgresql

数据库

ubuntu

客户端

sql

转载 2021-08-10 10:01:37 1092 阅读

怎么查看用户的SQL执行历史

问题：如何知道一个session都执行过哪些SQL语句？（查看当前比较容易，历史的呢？怎么复原sql的执行场景——事务关系、执行序列、单SQL还是存储过程）【方法一】查询v$sqltext、v$sqlarea、v$sqlstats视图 select * from v$sqlarea t where t.PARSING_SCHEMA_NAME in ('schema') order by t

sql

oracle

sql语句

用户信息

重启

转载 2021-08-10 10:01:35 571 阅读

“移山”法宝~阿里数据库迁移项目yugong（愚公）开源啦！【内有详解】

项目简介yugong（意译：愚公）项目是阿里的开源项目，该项目使用纯Java开发，主要作用是进行数据库迁移，目前该项目主要支持从oracle数据库向Mysql和DRDS数据库进行迁移。项目背景08年左右，阿里巴巴开始尝试MySQL的相关研究，并开发了基于MySQL分库分表技术的相关产品，Cobar/TDDL(目前为阿里云DRDS产品)，解决了单机Oracle无法满足的扩展性问题，当时也...

oracle

数据

物化视图

mysql

数据库

转载 2021-08-10 10:01:32 468 阅读

愚公使用指南

agapple edited this pageon 28 Jul 2016·11 revisions环境要求操作系统数据库迁移方案部署下载目录结构修改配置启动停止查看日志切换流程自定义数据转换运行模式详细介绍 MARK模式(MARK) CLEAR模式(CLEAR) 全量模式(FU...

oracle

mysql

数据

字段

物化视图

转载 2021-08-10 10:01:29 163 阅读

高可用开源方案 Keepalived VS Heartbeat对比

最近因为项目需要，简单的试用了两款高可用开源方案：Keepalived和Heartbeat。两者都很流行，但差异还是很大的，现将试用过程中的感受以及相关知识点简单总结一下，供大家选择方案的时候参考。1）Keepalived使用更简单：从安装、配置、使用、维护等角度上对比，Keepalived都比Heartbeat要简单得多，尤其是Heartbeat 2.1.4后拆分成3个子项目，安装、配置、使...

高可用

配置文件

自定义

apache

集群管理

转载 2021-08-10 10:01:27 301 阅读

记一次对网络抖动经典案例的分析

视频学习性能抖动剖析（一）性能抖动剖析（二）性能抖动剖析（三）网络抖动案例是一类处理难度较大的问题，原因主要是很多抖动发生的频率不高，且持续时间非常短极限情况可能仅有100ms以下，而很多用户的业务应用对实时性要求非常高，因此对此类在百毫秒的延迟也会非常敏感。本文记录的是一次多团队协作处理的抖动问题的过程，由于用户的执着，也使得我们在这个案例分析得较为深入，希望对大家今后的此...

缓存

链表

软中断

倒序

占用量

转载 2021-08-10 10:01:25 518 阅读

大数据时代存储知识扫盲，DAS,SAN和NAS的区别

一、预备知识为了避免专有名词缩略语干扰我们，先解释一下。SCSI接口小型计算机系统接口（Small Computer System Interface; 简写：SCSI），就是计算机主机内部设备之间（硬盘、软驱、光驱、打印机、扫描仪等）系统级接口的独立处理器标准。iSCSI接口Internet小型计算机系统接口。iSCSI 常常被认为是光纤通道（Fiber Channel）的一个低成...

文件系统

服务器

数据

分布式存储

存储技术

转载 2021-08-10 10:01:23 746 阅读

inux内存使用的FREE命令改进添加available项进一步避免FREE内存不足的误会

在各种QQ群里有大量同学会问，为什么LINUX/UNIX上free内存太少会不会有问题。为了避免这种不必要的误会，不同的OS版本，采用了不同的策略。例如最狠的是Solaris SUNOS ，在Solaris 8中将文件系统缓存直接算作free内存：而Linux中从大约2014年，内核版本kernels 2.6.27+开始引入了MemAvailable ,其解释为：...

linux

git

ide

换出

5g

转载 2021-08-10 10:01:21 190 阅读

FLUSH Statement

13.7.6.3FLUSH StatementFLUSH [NO_WRITE_TO_BINLOG | LOCAL] { flush_option [, flush_option] ... | tables_option}flush_option: { BINARY LOGS | DES_KEY_FILE | ENGINE LOGS | ERROR ...

mysql

sed

ide

git

unix

转载 2021-08-10 10:01:19 212 阅读

远程桌面，身份验证错误：要求的函数不正确等解决办法

windows版本10.0.17134，安装最新补丁后无法远程windows server 2008、2013、2016服务器报错信息如下：出

microsoft

解决方案

远程连接

重启

oracle

原创 2021-08-10 10:00:33 261 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

wx5caecf2ed0645的博客

使用工具分析慢查询日志

ERROR 1418 (HY000) at line 4416: This function has none of DETERMINISTIC, NO SQL, or READS SQL DAT

总结libevent安装方法

取消RHEL的注册提醒

pandas.DataFrame.head

配置iptables,把80端口转到8080

Postgres数据库忘记密码,三个步骤解决

安装、配置、启动、操作、关闭Redis

Innodb与Myisam引擎的区别与应用场景

Cache和Buffer的区别

sqlplus格式化输出

使用动态SQL语句实现简单的行列转置（动态产生列）

常见三种存储方式DAS、NAS、SAN的架构及比较

sqlnet.ora文件解析

动手为王——6种降低高水位方法，详细验证步骤

redo日志文件组的三种状态(current,active,inactive)

plsql中文乱码问题

慢查询阻塞了xtrabackup进而阻塞以后的sql导致的系统瘫痪问题

ASH、AWR、ADDM区别联系

Hard Parse&Soft Parse

ubuntu 16.04 安装 PostgreSQL-9.6 及用pgadmin4连接测试

怎么查看用户的SQL执行历史

“移山”法宝~阿里数据库迁移项目yugong（愚公）开源啦！【内有详解】

愚公使用指南

高可用开源方案 Keepalived VS Heartbeat对比

记一次对网络抖动经典案例的分析

大数据时代存储知识扫盲，DAS,SAN和NAS的区别

inux内存使用的FREE命令改进添加available项进一步避免FREE内存不足的误会

FLUSH Statement

远程桌面，身份验证错误：要求的函数不正确等解决办法

欢迎