一直以来DISTINCT的用法都为DBA所知，就是用来滤重。我们也没有必要质疑DISTINCT的滤重准确性。但今天突然不知道怎么想的，就想质疑一下。DISTINCT真的能保证过滤的对象没有重复记录吗？SQL> create table test_distinct as select rownum id from&
原创
2015-03-10 09:57:01
1024阅读
paip.索引优化---sql distict—order by 法 作者Attilax ， EMAIL:1466519819@qq.com 来源：attilax的专栏地址：http://blog.csdn.net/attilax原语句:select SQL_NO_CACHE DISTINCT ( gaopinzi.HEZI), LEFT (he
原创
2021-08-26 16:04:29
90阅读
select count(distinct *) from table;这样写会生成一个job 只有一个reducer执行，可以改为如下：select count(*) from (select distinct * from table) t;这样生成两个job，可有多个reducer执行，效率提升
原创
2016-03-10 10:04:16
1635阅读
基数 单个列唯一键（distict_keys）的数量叫做基数。回表 当对一个列
原创
2022-11-30 15:07:39
172阅读
查询语句
select [all|distict] 字段表达式1,字段表达式2,...
from 表名1,表名2,...
where 条件
group by 分组字段
原创
2009-03-23 16:11:57
538阅读
1. 基数单个列唯一键（distict_keys）的数量叫做基数。比如性别列，该列只有男女之分，抛开中性，所以这一列基数就是主键列的基数等于表的总行数。基数的高低影响列的数据分布。MariaDB [test]> select count(distinct gender),count(distinct phone) from test;+-------------...
转载
2021-08-18 10:31:10
85阅读
查询 SELECT语句用于从数据库中查询数据，当在PL/SQL中使用SELECT语句时，要与INTO子句一起使用，查询的 返回值被赋予INTO子句中的变量，变量的声明是在DELCARE中。SELECT INTO语法如下： SELECT [DISTICT|ALL]{*|column[,column,.
转载
2016-09-09 16:37:00
204阅读
2评论
1. 基数单个列唯一键（distict_keys）的数量叫做基数。比如性别列，该列只有男女之分，抛开中性，所以这一列基数就是主键列的基数等于表的总行数。基数的高低影响列的...
转载
2023-04-13 06:22:41
40阅读
SQL语句性能下降的原因原因可能有以下几种: (1)SQL语句本身写得不够优秀 (2)索引失效 (3)关联(join)查询太多 (4)服务器参数设置(缓存，线程数等) ……SQL执行顺序人类写SQL和理解SQL的顺序大体是: SELECT DISTICT --> FROM ON (JOIN)-> WHERE -->GROUP BY --> HAVING --&g
前提条件：知道mapreduce的原理及代码实现，知道常用的hivesql（比如join、count(distict)）在底层mapreduce是怎么实现的，知道怎么看执行计划，知道yarn的resouce manager webUI的界面数据的含义。 1、explain+语句：查看sql对应的mapreduce的stage 2、看执行计划的STAGE DEPENDENCIES：理清stage的D
转载
2023-07-14 12:04:38
47阅读
调整partition数量，每次reduece和distict的时候都应该调整，数量太大和太小都不好，通常来讲保证一个partition的大小在1～2G左右为宜 调整excutors 调整core 调整内存 使用cache （但是在内存不够的情况下，最好不要用，可能会频繁GC） 尽量减少shuffl
原创
2021-09-14 11:17:31
143阅读
distinct去除的不是重复字段，而是重复记录，就是去除DISTICT后面所有字段都相同的记录。举例：假设在一个多店版的商城系统里，有一个记录销售记录的表，记录着每个店铺的每一笔销售额。如下： 运行下面的查询，然后分别对比结果，我们就不难发现，distinct是去除重复的记录。 第一条查询 select distinct uid from sale_log; 筛选出了有销售额的店主。 第二条查询
原创
2022-07-08 13:51:13
112阅读
1. 基数单个列唯一键（distict_keys）的数量叫做基数。比如性别列，该列只有男女之分，抛开中性，所以这一列基数就是主键列的基数等于表的总行数。基数的高低影响列的数据分布。test 表的总函数是 7，gender 列的基数是 2，说明 gender 列里面有大量重复值，phone 列的基数等于总行数，说明 phone 列没有重复值，相当于主键。gender 列的数据分布如下：gende
原创
2022-01-04 09:53:06
215阅读
