DBAspace的博客_MySQL原创博文

DAX函数大全

针对PowerPivot的DAX函数参考一、筛选函数1、ALL函数：返回表中的所有行货返回列中的所有值，同时忽略可能已应用的任何筛选器，此函数可用于清除筛选器对表中的所有行创建计算，返回删除了筛选器的表或列的值语法:ALL({<table> | <column>[, <column>[, <column>[,…

DAX

置顶原创精选 2017-12-15 09:46:09 10000+阅读 6点赞 2收藏

DBA不等于全能

在激烈的职场竞争中，DBA需要的技能是越来越多的，如下图技能树:这些所有的技能并不是在工作中都会用到的，根据公司的发展以及业务，可以只能应用到部分的吧...然而对于在求职过程中，这些东西又是必不可少的，因为有《神级》的"面试官"问这样的题目，体现水平超级666，试想，这些问题，真的在工作中真的会有用吗？只有天知地知你知....

MySQL

置顶原创精选 2017-12-07 11:27:17 3724 阅读 9点赞 2收藏

MySQL5.7 GTID与传统快速切换

当前场景：某些业务场景还未开启GTID服务组，在最新版本中，BINLOG组提交也基于GTID方式，因此如何检测是否符合开启GTID条件，在线切换使用GTID,以及如何快速回滚：gtid_mode参数新选项：MySQL提供两个额外的选项off_permissive和on_permissive gtid-mode的几种状态说明： &n

GTID

置顶原创 2017-11-17 14:00:41 2014 阅读 7点赞 3收藏

快速实现MySQL迁移到Redis

一个简单快速的将MySQL的数据迁移到Redis中并且以hash方式存储，数据的存储需要遵守redis的通讯协议(官方连接 http://redis.io/topics/mass-insert)，如: *3 CR LF //三个字段 $3 CR L

MySQL

迁移

快速实现

置顶原创 2017-11-16 14:37:55 1090 阅读 4点赞 1收藏

3步启动PG

简介PostgreSQL 是一种非常复杂的对象-关系型数据库管理系统（ORDBMS），简称pgsql,它支持大部分 SQL 标准并且提供了许多其他现代特性：复杂查询外键触发器视图事务完整性多版本并发控制同样，PostgreSQL 可以用许多方法扩展，如通过增加新的：数据类型函数操作符聚集函数索引方法过程语言，同时也是一个开源免费的DB，号称--业界领先的开源关系数据库环境准备

PGSQL

3步

带你启动

置顶原创精选 2017-11-14 19:34:01 1558 阅读 3点赞 1收藏

3分钟了解Mysql空间搜GeoHash

简单介绍： Mysql 内置函数方案，适合于已有业务，新增加LBS功能，增加经纬度字段方可，避免数据迁移，在5.7.5后实现更多功能实现INNODB的空间搜方法，之前版本主要是对MYISAM的支持。在此之前，InnoDB将几何数据存储为BLOB（二进制大对象）数据，在空间数据上只能创建前缀索引，当涉及空间搜索时非常低效，尤其是在涉及复杂的几何数据

GeoHash

置顶原创精选 2017-11-11 17:18:20 5730 阅读 9点赞 5收藏 6评论

BINLOG之1781的问题

一次通过BINLOG恢复数据时报：ERROR 1781 (HY000): @@SESSION.GTID_NEXT cannot be set to UUID:NUMBER when @@GLOBAL.GTID_MODE = OFF场景说明:一次误删数据删除还原，直接把BINLOG文件导成SQL文件形式(mysqlbinlog mysql-bin.000020>a20.sql),在通过sour

1781

置顶原创 2017-11-09 15:01:46 1341 阅读 4点赞 2收藏 1评论

MySQL 新特性应用JSON

MySQL5.7之JSON使用MySQL 支持原生的 JSON 数据类型，列不能设置默认值从MySQL 5.7.8 开始，MySQL支持原生的JSON格式，即有独立的json类型，用于存放 json格式的数据。JSON 格式的数据并不是以string格式存储于数据库而是以内部的binary 格式，以便于快速的定位到json 格式中值在插入和更新操作时MySQL会对JSON 类型做校验，已检查数据是

mysql

JSON

置顶原创精选 2017-11-02 09:44:10 2279 阅读 5点赞 1收藏 1评论

Percona XtraDB Cluster规划实施

Percona

XtraDB

Cluster

置顶原创 2017-07-30 15:30:03 2604 阅读 4点赞 3收藏 1评论

MYSQL explain详解之range

explain显示了MySQL如何使用索引来处理DML语句以及连接表，explain显示的信息可以帮助选择更好的索引和写出更优化的查询语句 2.EXPLAIN列的解释：table：显示这一行的数据是关于哪张表的type：这是重要的列，显示连接使用了何种类型。从最好到最差的连接类型为const、eq_reg、ref、range、 indexhe和ALLpossible_keys

MySQL

myspl

置顶原创精选 2017-07-23 10:22:36 5879 阅读 6点赞 1收藏

pt-osc全解pt-online-schema-change

MySQL 大字段的DDL操作：加减字段、索引、修改字段属性等，在5.1之前都是非常耗时耗力的，特别是会对MySQL服务产生影响。在5.1之后随着Plugin Innodb的出现在线加索引的提高了很多，但是还会影响（时间缩短了），主要是出现了MDL锁。不过5.6可以避免上面的情况，但目前大部分在用的版本都是5.6之前的。工作原理：&nbs

pt

osc

置顶原创精选 2017-05-25 23:39:45 1282 阅读 4点赞

MySQL到CSV几种方法

数据的导出导入，最常用的方法：导出：省资源型：mysql -e "select * from aa" -s -s >aa.txt 导入：load data infile '/tmp/user_type_2017-08-21.txt' into table aa fields terminated by '\t' ##耗资源型：

CSV

置顶原创精选 2017-05-03 16:17:55 1324 阅读 4点赞 2评论

python 读取excel数据到mysql

#!/usr/bin/env python# -*- coding: utf-8 -*-import MySQLdbimport osimport sysimport rereload(sys)sys.setdefaultencoding( "utf-8" )import timeimport datetimetoday=datetime.date.today()oneday=datetime.t

mysql

Excel

置顶原创 2017-04-11 14:02:49 994 阅读 3点赞

数据库优化前章

其他

youhua

置顶原创 2017-03-20 16:17:50 754 阅读 3点赞

数据的还原操作mixed和row的操作

MySQL备份策略：全备+增量备份主要包括以下几个步骤：1、开启BINLOG服务2、使用MYSQLDUMP对数据库进行完全备份3、使用flush logs指令刷新创建新的2进制日志4、使用mysqlbinlog logs-bin.[0-9]* |mysql进行增量备份的恢复一般的，假设我们周日下午3点进行了完全备份并生成备份文件full_backup_20170215.sql,周1周2中午1点进行

反转

BINLOG

备份策略

置顶原创精选 2017-02-15 16:18:06 1472 阅读 3点赞

事务和锁

Atomic，同一个事务里，要么都提交，要么都回滚 Consistency，即在事务开始之前和事务结束以后，数据库的完整性约束没有被破坏 Isolation，并发事务间的数据是彼此隔离的，通过锁的方式来实现。 Durabiliy，事务提交后，所有结果务必被持久化REDO UNDOINNODB记录逻辑的操作。INNODB原理：

其他

事务

置顶原创 2017-02-13 14:46:30 795 阅读 2点赞

RAID磁盘阵列的原理与搭建

RAID（Redundant Array of Independent Disks，独立磁盘冗余阵列）可以提供较普通磁盘更高的速度、安全性，所以服务器在安装时都会选择创建RAID。 RAID的创建有两种方式：软RAID（通过操作系统软件来实现）和硬RAID（使用硬件阵列卡）

RAID

其他

置顶原创精选 2017-02-10 11:38:15 2665 阅读 2点赞

MySQL水平分割案例

水平分割：根据一列或者多列的值把数据行放到多个独立的表里，水平分表方式可以通过多个低配置主机整合起来，实现高性能。根据公司的业务，两套重复的架构，部署在不同的IDC上，需要对数据进行合并操作，数据库采用水平方式实现业务数据的存储，如架构图：说明：路由表A作用：md5key作为分表策略的依据，对md5key值进行取模运算，需要把数据写入具体表位置。一般对于业务需求，可以对此字段进行做相应的处理，对数

MySQL

分表

置顶原创精选 2017-02-07 14:07:23 1310 阅读 2点赞

BLACKHOLE的BINLOG实现

BlackHole ：黑洞引擎，写入的任何数据都会消失，用于记录binlog做复制的中继存储！是否支持BLACKHOLE引擎，通过查看SHOW ENGINES进行查看。BlackHole的用途:用于binlog的备份线上MySQL的binlog一般会保留3-5天，但是对比较重要的业务，binlog可能需要保留一个月甚至半年。线上服务器可没有这么大的空间，最多保留10天就会被purge掉。此时bla

BLACKHOLE

置顶原创 2017-02-06 10:35:15 1196 阅读 4点赞

mysql 数据一致性校验

工作上需要把一个从库提升为主库，但对从库和主库的数据一致性不能保证一样，所以就利用pt-table-checksum 工作来检查主从的一致性，操作前需要注意的事项： (1)在有些情况下，recursion-method如果不设会报错：Diffs cannot be detected because no slaves were found. 其参数有四：pro

MySQL

pt

置顶原创精选 2017-01-16 17:02:18 1827 阅读 6点赞 1评论

gh-ost

1. gh-ost工作模式gh-ost有三种工作模式：a:连接到从库，在主库做迁移。b:连接到主库，迁移过程所有操作都在主上操作，包括读取binlog等等。c:在从库做迁移测试。三种方法各有优缺点，先说a的缺点，a会在从上面读取binlog,但数据库主从数据为什么会造成不一致，一个很重要的原因是主库的binlog没有完全在从库执行。所以感觉a方法有丢失数据的风险。b方法任何操作都会再主库操作，或多

其他

gh

置顶原创 2017-01-12 11:08:38 1325 阅读 1点赞

MySQL到CSV

把MySQL数据导出为CSV格式，实现快速的导入导出，分为本地和远程两种方式 MySQL自带的数据导出的命令（本地导出）导出：select * from tableA into outfile '/tmp/aa.csv' fields terminated

MySQL

csv

置顶原创 2016-12-27 12:03:53 681 阅读 6点赞 1评论

mysqldump还原指定的库

从一个全备的数据恢复指定的数据，方法有很多，可以通过特殊方法从全备的数据文件取出数据数据库名和表名等等，还可以通过一个全备指定库名的方式恢复指定的数据，这个方法简单快速，这个方法会恢复不需要的库，但不会恢复数据.过程如下：1、查看数据库还没备份前的状况MariaDB [(none)]> show databases;+-------------

mysql

dump

备份还原

置顶原创 2016-12-20 17:43:30 1344 阅读 5点赞

MySQL5.7配置参数

MySQL5.7的参数调整配置，参考例子，某些具体参数的设置还需要根据实际来调整。[client] port = 3306socket &n

MySQL

5.7

置顶原创 2016-12-20 16:12:19 1103 阅读 2点赞

MySQL版本升级

日常工作中，数据版本升级是常有的事，升级过程非常简单，但也容易忽视一些问题1、大版本号和小版本号，使用在什么位（32/64）的系统上2、或者5.1的默认使用区分大小写，若5.6使用不区分，这会导致APP找不到库的，所以需要注意3、就是5.1到5.6升级没问题，但到5.7，有时候会提示：ERROR 1031 (HY000) at line 833: Table storage engine for

MySQL

update

置顶原创 2016-12-19 14:49:48 1169 阅读 5点赞 6评论

MySQL的分表和分区介绍

在日常开发或维护中经常会遇到大表的情况，所谓的大表是指存储了百万级乃至千万级条记录的表。这样的表过于庞大，导致数据库在查询和插入的时候耗时太长，性能低下，如果涉及联合查询的情况，性能会更加糟糕。分表和表分区的目的就是减少数据库的负担，提高数据库的效率，通常点来讲就是提高表的增删改查效率。一、什么是分表：

list

key

hash

range

置顶原创精选 2016-12-14 15:31:00 4973 阅读 9点赞 5评论

MySQL分库分表备份

#!/usr/bin/env python # -*- coding: utf-8 -*- import MySQLdb import os import sys import time currentDate=time.strftime('%Y%m%d',time.localtime()) def

mysql

dump

置顶原创 2016-12-12 22:53:51 1176 阅读 2点赞 1评论

mysql审计插件设置

1、create database auditdbuse auditdb2、create table accesslog(ID int primary key auto_increment,ConnectionID int,ConnUser varchar(30),MatchUser varchar(30),LoginTime datetime)3、保证所有连接用户对此表有写入权限insert i

MySQL

审计

置顶原创 2016-12-09 10:27:52 917 阅读 6点赞 2评论

MySQL_tps

TPS(Transaction Per Second) 一个系统的吞度量（承压能力）与request对CPU的消耗、外部接口、IO等等紧密关联。单个reqeust 对CPU消耗越高，外部系统接口、IO影响速度越慢，系统吞吐能力越低，反之越高。 MySQL-tps:每秒钟系统能够处理的

TPS

置顶原创 2016-12-06 23:32:14 1148 阅读 2点赞

MySQL_qps

#!/usr/bin/env python #_*_coding:utf8 _*_ import MySQLdb import datetime #qps #!/usr/bin/env python import MySQLdb import time from influxdb import In

QPS

置顶原创 2016-12-06 23:30:10 743 阅读 1点赞

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

DBAspace