1.  Distinct 位置 单独的distinct只能放在开头,否则报错,语法错误 例:SELECT Sid,DISTINCT(Sscore) score from t_student; [SQL]SELECT Sid,DISTINCT(Sscore) score from t_student;[Err] 1064 - You have an error in your SQL syntax; check the manual that corresponds to your MySQL s

语法 以下是DISTINCT关键字的基本语法,用于删除重复记录. SELECT DISTINCT column1, column2,.....columnN FROM table_name WHERE [condition] 例 请参考具有以下记录的CUSTOMERS表: ID NAME AGE ADDRESS SALARY 1 Ramesh 32 Ahmedabad 2000.00 2 Khilan 25 Delhi 1500.00 3 kaushik 23 Kota 2000.00 4 Ch

设计范式参看,DDL与DDL 库表基础规范 1.注释 每个表要添加注释,对 status 型需指明主要值的含义,如”0-离线,1-在线” 2.表的字段数量 单表字段数一般考虑上限为 30左右,再多的话考虑垂直分表,一是冷热数据分离,二是大字段分离,三是常在一起做条件和返回列的不分离. 表字段控制少而精,可以提高IO效率,内存缓存更多有效数据,从而提高响应速度和并发能力,后续 alter table 也更快. 3.所有表都必须要显式指定主键 如果没有主键或唯一索引,update/delete是通过

select * from (SELECT titleid,count(titleid) c FROM [DragonGuoShi].[dbo].[ArticleInfo] group by titleid,[CategoryCode] having count(titleid)>1)as t order by c delete [DragonGuoShi].[dbo].[ArticleInfo] where ID not in ( SELECT max(ID) c FROM [DragonGu

今日内容: 1.完整查询语句 2.多表查询 3.子查询 1.完整查询语句: 首先对于昨天的学习补充一个复制表 示例:首先我在一个库中创建了一个t1表(id 为int类型 设置为主键 并且设置了自增描述auto_increment,然后是一个name字段 类型char(5)) 然后我通过复制表的语句来实现了t2的创建:create table t2 select * from t1; 可以看出来我们复制的这个表没有复制到t1的描述和主键,只能赋值t1表的基本结构 接下来我开始总结今天所学的第一个知

背景 在刚使用hive的过程中,碰到过很多问题,任务经常需要运行7,8个小时甚至更久,在此记录一下这个过程中,我的一些收获 join长尾 背景 SQL在Join执行阶段会将Join Key相同的数据分发到同一个执行Instance上处理.如果某个Key上的数据量比较多,会导致该Instance执行时间比其他Instance执行时间长.其表现为:执行日志中该Join Task的大部分Instance都已执行完成,但少数几个Instance一直处于执行中,这种现象称之为长尾 长尾类别&优化方法 小表

转自:http://my.oschina.net/leejun2005/blog/100922 最近几次被问到关于数据倾斜的问题,这里找了些资料也结合一些自己的理解. 在并行计算中我们总希望分配的每一个task 都能以差不多的粒度来切分并且完成时间相差不大,但是集群中可能硬件不同,应用的类型不同和切分的数据大小不一致总会导致有部分任务极大的拖慢了整个任务的完成时间,硬件不同就不说了,应用的类型不同其中就比如page rank 或者data mining 里面一些计算,它的每条记录消耗的成本不太一

1.select语句 (1)语法 SELECT *|{[DISTINCT] column|expression [alias],...} FROM table; (2)示例: 选择全部列 SELECT * FROM departments; 选择特定列 SELECT department_id, location_id FROM departments; (3)注意 SQL 语言大小写不敏感.         SQL 可以写在一行或者多行        关键字不能被缩写也不能分行       

一.索引设置 1.索引的设置原则 经常出现在WHERE条件.关联条件中的字段作为索引字段: 在满足查询需求的前提下,应尽可能少的创建索引:(对于一个组合索引,可以满足以组合索引左边的一部分字段的查询需求): 经常更新的字段,不适合创建索引: 区分度太低的字段,不适合创建索引: 不要为永远不会出现在WHERE条件.关联条件中的字段创建索引: 2.案例分析 比如有下面一张表: 查询需求如下: 需求一:按单个客户编号查询某个客户的交易明细. 需求二:按单个客户编号查询某个时间段的某只股票的交易明细.

最近一段时间一边在线上抓取SQL来优化,一边在整理这个开发规范,尽量减少新的问题SQL进入生产库.今天也是对公司的开发做了一次培训,PPT就不放上来了,里面有十来个生产SQL的案例.因为规范大部分还是具有通用性,所以也借鉴了像去哪儿和赶集的规范,但实际在撰写本文的过程中,每一条规范的背后无不是在工作中有参照的反面例子的.如果时间可以的话,会抽出一部分或分析其原理,或用案例证明. 1. 命名规范 库名.表名.字段名必须使用小写字母,并采用下划线分割 MySQL有配置参数lower_case_tab

Count:用来求某个数据的个数. 在以下所有的示例中所采用的模型为: from django.db import models # 定义作者模型 class Author(models.Model): name = models.CharField(max_length=100, unique=True) age = models.IntegerField() email = models.EmailField() class Meta: db_table = 'author' def __s

MySQL数据库使用规范一.建表规约1.[强制]表达是与否概念的字段,必须使用is_xxx的方式命名,数据类型是unsigned tinyint (1表示是,0表示否) 说明:任何字段如果为非负数,必须是unsigned 正例:表达逻辑删除的字段名is_deleted,,1表示删除,0表示未删除2.[强制]表名.字段名必须使用小写字母或数字,禁止出现数字开头,禁止两个下划线中间出现数字.数据库字段名的修改代价很大,因为无法进行预发布,所以字段名称需要慎重考虑. 正例:getter_admin,t

第一步,建一个表,表数据如下: 第二步:发现叫豆豆的是两只狗,一只是金毛犬,一只狼青. 如果我用 select 宠物名称,宠物大类 from test_1;返回结果就只有一条. 如果我用 select 宠物名称,宠物大类,宠物品种 from test_1;返回结果就是两条. 说明distinct 的作用范围是所有跟在其后的字段,并不是最近的那个字段.这也是为啥,distinct得放在前面的原因.

Given a string S, find the length of the longest substring T that contains at most two distinct characters.For example,Given S = “eceba”,T is “ece” which its length is 3. 这道题给我们一个字符串,让我们求最多有两个不同字符的最长子串.那么我们首先想到的是用哈希表来做,哈希表记录每个字符的出现次数,然后如果哈希表中的映射数量超过两

select * from production;alter table production add productionprice number(7,2); UPDATE production set productionprice=102.23--查询语句-- subStr 用来分割字段 1 为起始位置也就是第一个字,2位结束位置-- 字段名称后直接跟 汉字或者其他的注释信息 为查询后的 列头select subStr(productname,1,2) 产品名称, quantity 原价,

本事例实验用表task,结构如下 MySQL> desc task; +-------------+------------+------+-----+-------------------+-------+ | Field       | Type       | Null | Key | Default           | Extra | +-------------+------------+------+-----+-------------------+-------+ | PLA

问题引出:在实际中遇到一个问题,要进行集合去重,集合内存储的是引用类型,需要根据id进行去重.这个时候linq 的distinct 就不够用了,对于引用类型,它直接比较地址.测试数据如下: class Person { public int ID { get; set; } public string Name { get; set; } } List<Person> list = new List<Person>() { new Person(){ID=1,Name="

一.SQLite入门语句之HAVING HAVING 子句允许指定条件来过滤将出现在最终结果中的分组结果. WHERE 子句在所选列上设置条件,而 HAVING 子句则在由 GROUP BY 子句创建的分组上设置条件. 1.获取满足条件A的数据分组后还满足条件B的数据 select * from table_name where [condition_A] group by 字段A having [condition_B] 注:HAVING 子句必须放在 GROUP BY 子句之后,必须放在 O

1.使用COALESCE时,用到group by with cube,如果之前两个表left join时,有数据为null,就会使得查出的数据主键不唯一 例如: select COALESCE (c.value,'total_count')as coupon_price, COALESCE (c.souform,'total_count')as souform, count(c.id)as coupon_num, count(distinct c.auserid,c.code)as user_n

Given a string S and a string T, count the number of distinct subsequences of T in S. A subsequence of a string is a new string which is formed from the original string by deleting some (can be none) of the characters without disturbing the relative

首先定义一个简单类,并重写ToString方法. public class CommidityFilter { public string Property { get; set; } public string Characterist { get; set; } public override string ToString() { return string.Format("Property:{0},Characterist:{1}", this.Property, this.C