优化sql语句

Michael — Fri, 31 Mar 2006 14:23:00 GMT

1 索引, 创建合适的索引最有效的优化手段。很多资料讲这个。

2 尽量返回少量结果集。
譬如，有一个表存放着其他应用填充的数据，你需要从这个表中获取所有的数据并进行处理。
现实情况是，某个时刻这个表可能积累了500,000级别以上的数据。如果程序中直接使用 select * from tb_TempData返回所有结果集合，就会导致严重后果。想想，返回这些数据都需要相当多的时间或超时，以及磁盘IO或cache等恶劣影响。
合适的做法是返回top 1000或者依据ID（如果有）字段返回一定范围的记录。处理完这批后，再处理下1000条。

3 尽量在表join之前将记录集限制为最小
譬如sql: select a.field1, a.field2, b.name from table1 as a inner join table2 as b on a.ID = b.FID where a.update_time>'2006-3-3'
优化的前提：大多数情况下，符合update_time条件的记录集很小。
table1和table2都是大表，尽量将此sql改为:
select a.field1, a.field2, b.name from (select field1, field2) from table1 where update_time>'2006-3-3') as a
inner join table2 as b on a.ID = b.FID
当sql语句比较复杂，where条件较多时，sql server优化不能保证正确选择返回最小集合的条件。所以，我们需在设计sql语句时指明这点。

SQL Server中字符串类型(varchar)和binary的转换

Michael — Wed, 29 Mar 2006 03:57:00 GMT

一个数据库表A中有一列: guid_text char(36)，保存着类似'00112FEA1624-44162203-02E3-1CC5-CE02'的guid（自定义的算法）。
表中另外一列用的是binary(16)类型。
希望实现的功能是在SQL脚本中实现char(36)到binary(16)的转换，例如转换'00112FEA1624-44162203-02E3-1CC5-CE02' 为 0x00112FEA16244416220302E31CC5CE02。

cast或convert函数不能完成这样的转换。
c++程序中实现这样的转换很容易，但不能直接将这样的函数置于sql语句中执行批量update。
似乎没有什么好办法，最后只能用一个笨办法，直接把字符串中每两个字节转为一个binary字节。这可以通过sql server自定义函数实现（no error handle)。

create function fnGetBinary
    (@strGUID varchar(40))
returns varbinary(40)
as
begin
    declare @varBinGuid varbinary(40)
    declare @iTextPos tinyint
    set @iTextPos = 0

--    -     45
--    0~9    48
--    A~F    65
    declare @iNum tinyint
    set @iNum = 0
    while (@iNum < 16)
    begin
        declare @asciiVal tinyint
        declare @oneByte tinyint
        set @asciiVal = ascii(right(@strGUID, 36-@iTextPos))
        if @asciiVal != 45
        begin
            if @asciiVal < 65
            set @oneByte = @asciiVal - 48
            else
            set @oneByte = @asciiVal - 65 + 10

                   set @iTextPos = @iTextPos + 1

            set @asciiVal = ascii(right(@strGUID, 36-@iTextPos))
            if @asciiVal < 65
            set @oneByte = @oneByte*16 + @asciiVal - 48
            else
            set @oneByte = @oneByte*16 + @asciiVal - 65 + 10

                   set @iTextPos = @iTextPos + 1
            if @iNum = 0
            set @varBinGuid = cast(@oneByte as binary(1))
            else
                set @varBinGuid = @varBinGuid + cast(@oneByte as binary(1))
            set @iNum = @iNum + 1
        end
        else
            set @iTextPos = @iTextPos + 1
    end

    return @varBinGuid
end

然后我们就可以直接在sql语句中使用这个函数。
update xxxA set guid = dbo.fnGetBinary(guid_t)
由于不用一条一条取出记录，再更新，速度会有数量级的提高；表越大，对比越明显。

后记：如果用SQL Server专门处理guid的数据类型uniqueidentifier，会方便一些。
通过uniqueidentifier作为桥梁，可以方便实现guid从binary类型转为char类型。

declare @tmpText varchar(36)
set @tmpText = '4B097C43-66A8-49c0-A6D1-3194457C5B22'
--right, can convert char to binary by uniqueidentidier
select cast(@tmpText as uniqueidentifier), cast(cast(@tmpText as uniqueidentifier) as binary(16))

--wrong, can't convert char to binary directly
select cast(@tmpText as binary(16))

Database

优化sql语句

SQL Server中字符串类型(varchar)和binary的转换