首页 诗词 字典 板报 句子 名言 友答 励志 学校 网站地图
当前位置: 首页 > 教程频道 > 数据库 > SQL Server >

SQL牛人必入->难死本公司三个CTO:返回部分记录,该怎么处理

2012-02-04 
SQL牛人必入--难死本公司三个CTO:返回部分记录有一张表:主键级别名字IDIntPrimaryKeyIdentity,ClassInt,N

SQL牛人必入-->难死本公司三个CTO:返回部分记录
有一张表:
主键                                                   级别             名字
ID   Int   Primary   Key   Identity   ,Class   Int,Name   nVarchar(16),等等...

此表有1000万条以上记录,而且记录会经常增删,因此ID并不连续
如果想要返回第N条记录开始的M条记录:比如总共有1000万条记录现在想要返回第5200001到5200010之间的十条记录,也就是说返回表中的部分记录,而这部分记录的起始ID并不知道(因为ID并不连续)这个该怎么做?
兄弟难道要将其导出到临时表然后再筛选?可是这个问题有一个十分严格的时间响应要求,500万条以上的记录如果导出恐怕不是几秒钟就能搞定的,不知各位SQL牛人如何搞定(Select   有个   Top   n   难道就没有   From   n   To   M   返回一个记录区间的功能?)
PS:还有一个变态的要求就是要在ACCESS数据库下实现,嘿嘿。

[解决办法]
取n到m条记录的语句

取n到m条记录的语句

1.
select top m * from tablename where id not in (select top n * from tablename)

2.
select top m * into 临时表(或表变量) from tablename order by columnname -- 将top m笔插入
set rowcount n
select * from 表变量 order by columnname desc

3.
select top n * from
(select top m * from tablename order by columnname) a
order by columnname desc


4.如果tablename里没有其他identity列,那么:
select identity(int) id0,* into #temp from tablename

取n到m条的语句为:
select * from #temp where id0 > =n and id0 <= m

如果你在执行select identity(int) id0,* into #temp from tablename这条语句的时候报错,那是因为你的DB中间的select into/bulkcopy属性没有打开要先执行:
exec sp_dboption 你的DB名字, 'select into/bulkcopy ',true


5.如果表里有identity属性,那么简单:
select * from tablename where identitycol between n and m


[解决办法]
还有一个变态的要求就是要在ACCESS数据库下实现,嘿嘿。

我不知道上诉语句在access中能否实现.
[解决办法]
设要返回第m到n条记录,tb为表名,给ID顺序索引,试试

select top m-n+1 from tb where id> (select max(id) from (select top m-1 id from tb) x)

因为m,n为常量,所以不存在top 变数问题

如果不要求一条语句,建议,先
select max(id) from (select top m-1 id from tb) x
记录下这个maxid,然后再执行
select top m-n+1 from tb where id> maxid
(如果是前台程序)
[解决办法]
如果没有变态的要求的话就不难
[解决办法]
Access?

Access中不支持临时表,而且对于in或not in 的处理效率极低。

1000W,这么多的数据,不应该选Access做后台数据库,毕竟Access是桌面型数据库,其安全性、稳定性、并发访问处理都无法与SQL Server、Oracle等大型企业级数据库相比。
[解决办法]
----这里以Northwind中的orders表为例(取从M到N)
----取第100~200之间的记录

SET ROWCOUNT 100

declare @Maxid int
select @Maxid=orderid from dbo.Orders order by orderid

select @maxid

----200-100
set rowcount 100
select * from orders where orderid> @maxid order by orderid
[解决办法]
强帖留名
[解决办法]
如果用Access,那In, Not IN 效率不是一般的低,甚至Sybase12也低.
建议把数据换到SQL Server里面先
[解决办法]
CREATE PROCEDURE CN5135_SP_Pagination
/*
***************************************************************
** 中国无忧商务网千万数量级分页存储过程 **
***************************************************************
参数说明:
1.Tables :表名称,视图
2.PrimaryKey :主关键字


3.Sort :排序语句,不带Order By 比如:NewsID Desc,OrderRows Asc
4.CurrentPage :当前页码
5.PageSize :分页尺寸
6.Filter :过滤语句,不带Where
7.Group :Group语句,不带Group By

版权所有:中国无忧商务网(http://www.cn5135.com)
欢迎试用,有什么心得请 Mail:xzhijun@GMail.com
示例代码:http://www.cn5135.com/Opportunities/Pagination.asp
注:转载请保留相关版权说明,谢谢!^_^
***************************************************************/
(
@Tables varchar(1000),
@PrimaryKey varchar(100),
@Sort varchar(200) = NULL,
@CurrentPage int = 1,
@PageSize int = 10,
@Fields varchar(1000) = '* ',
@Filter varchar(1000) = NULL,
@Group varchar(1000) = NULL
)
AS

/*默认排序*/
IF @Sort IS NULL OR @Sort = ' '
SET @Sort = @PrimaryKey

DECLARE @SortTable varchar(100)
DECLARE @SortName varchar(100)
DECLARE @strSortColumn varchar(200)
DECLARE @operator char(2)
DECLARE @type varchar(100)
DECLARE @prec int

/*设定排序语句.*/
IF CHARINDEX( 'DESC ',@Sort)> 0
BEGIN
SET @strSortColumn = REPLACE(@Sort, 'DESC ', ' ')
SET @operator = ' <= '
END
ELSE
BEGIN
IF CHARINDEX( 'ASC ', @Sort) = 0
SET @strSortColumn = REPLACE(@Sort, 'ASC ', ' ')
SET @operator = '> = '
END


IF CHARINDEX( '. ', @strSortColumn) > 0
BEGIN
SET @SortTable = SUBSTRING(@strSortColumn, 0, CHARINDEX( '. ',@strSortColumn))
SET @SortName = SUBSTRING(@strSortColumn, CHARINDEX( '. ',@strSortColumn) + 1, LEN(@strSortColumn))
END
ELSE
BEGIN
SET @SortTable = @Tables
SET @SortName = @strSortColumn
END

SELECT @type=t.name, @prec=c.prec
FROM sysobjects o
JOIN syscolumns c on o.id=c.id
JOIN systypes t on c.xusertype=t.xusertype
WHERE o.name = @SortTable AND c.name = @SortName

IF CHARINDEX( 'char ', @type) > 0
SET @type = @type + '( ' + CAST(@prec AS varchar) + ') '

DECLARE @strPageSize varchar(50)
DECLARE @strStartRow varchar(50)
DECLARE @strFilter varchar(1000)
DECLARE @strSimpleFilter varchar(1000)
DECLARE @strGroup varchar(1000)

/*默认当前页*/
IF @CurrentPage < 1
SET @CurrentPage = 1

/*设置分页参数.*/
SET @strPageSize = CAST(@PageSize AS varchar(50))
SET @strStartRow = CAST(((@CurrentPage - 1)*@PageSize + 1) AS varchar(50))

/*筛选以及分组语句.*/
IF @Filter IS NOT NULL AND @Filter != ' '
BEGIN
SET @strFilter = ' WHERE ' + @Filter + ' '
SET @strSimpleFilter = ' AND ' + @Filter + ' '
END
ELSE
BEGIN
SET @strSimpleFilter = ' '
SET @strFilter = ' '
END
IF @Group IS NOT NULL AND @Group != ' '
SET @strGroup = ' GROUP BY ' + @Group + ' '
ELSE
SET @strGroup = ' '

/*执行查询语句*/
EXEC(
'
DECLARE @SortColumn ' + @type + '
SET ROWCOUNT ' + @strStartRow + '
SELECT @SortColumn= ' + @strSortColumn + ' FROM ' + @Tables + @strFilter + ' ' + @strGroup + ' ORDER BY ' + @Sort + '
SET ROWCOUNT ' + @strPageSize + '
SELECT ' + @Fields + ' FROM ' + @Tables + ' WHERE ' + @strSortColumn + @operator + ' @SortColumn ' + @strSimpleFilter + ' ' + @strGroup + ' ORDER BY ' + @Sort + '
'
)
GO

------解决方案--------------------


从5200001到5200010


select top 10 * from (select top 5200010 * from tablename order by ID DESC)
首先获取表中的前5200010条记录,然后进行逆序排列,正取前十条,不就获得了所需的中间十条记录了吗?

如果对获取的数据是逆序的不满意,可以对这十条数据再进行排序
[解决办法]
从5200001到5200010


select top 10 * from (select top 5200010 * from tablename order by ID DESC)t
首先获取表中的前5200010条记录做为一个表,然后进行逆序排列,正取前十条,不就获得了所需的中间十条记录了吗?

如果对获取的数据是逆序的不满意,可以对这十条数据再进行排序
刚才忘记给查出的数据赋表名了

[解决办法]
select top m-n * from test where id not in (select top n id from test)

[解决办法]
既然你的ID是流水号,那么我们也许可以这样做:
select * from test
where ID > = (
select max(ID) from
(select top 10 ID from test) t
)
and ID <= (
select max(ID) from
(select top 20 ID from test) t
)

虽说ID好不是连续的,但是他是有顺序的,所以我们可以取到m,n的最大值,再进行比较就可以拉
[解决办法]
Where ID > = m
按 ID 排序
定位到第N条启示,读取它的ID到x
where ID > = m and ID <= x
我在SQL上(1.5M条记录)做过类似的功能,还有一个办法,过滤条件做成智能的,用递归来重复过滤,并且在过滤的过程根据返回的值调整过滤语句,其实最大的问题还是ACCESS不够好。

应该OK了吧,一个有三个CTO并且要用钱包装大象的公司,牛呀!

热点排行