急急求百万级数据多表查询分页存储过程

lyfeixue 2008-06-27 12:45:02
查询A表:id,name,comid,info
查询B表:comid,comname,cominfo
关键字 info like '%keyword%'

求一个存储过程,在网上找了一天多,找到的,都不是很合适,要么没有统计,或者统计总数有问题
我想,如果找不到通用的,专门的也行,或者给我一个类似的参考下
...全文
1647 27 打赏 收藏 转发到动态 举报
写回复
用AI写文章
27 条回复
切换为时间正序
请发表友善的回复…
发表回复
royalchunlei 2010-11-24
  • 打赏
  • 举报
回复
mark 测试200W 11秒 貌似还有更好的吧?
banzi7 2010-07-12
  • 打赏
  • 举报
回复
mark
我看你有戏 2009-07-27
  • 打赏
  • 举报
回复
mark
正宗老冉 2008-06-27
  • 打赏
  • 举报
回复
来看 Ctrl+V

并重新学习收藏.
nzperfect 2008-06-27
  • 打赏
  • 举报
回复
推荐我的:(要求有唯一值列)
http://www.dmblogs.com/nzBlog/article.asp?id=25
liangCK 2008-06-27
  • 打赏
  • 举报
回复
CREATE PROC sp_PageView
@tbname sysname, --要分页显示的表名
@FieldKey nvarchar(1000), --用于定位记录的主键(惟一键)字段,可以是逗号分隔的多个字段
@PageCurrent int=1, --要显示的页码
@PageSize int=10, --每页的大小(记录数)
@FieldShow nvarchar(1000)='', --以逗号分隔的要显示的字段列表,如果不指定,则显示所有字段
@FieldOrder nvarchar(1000)='', --以逗号分隔的排序字段列表,可以指定在字段后面指定DESC/ASC用于指定排序顺序
@Where nvarchar(1000)='', --查询条件
@PageCount int OUTPUT --总页数
AS
SET NOCOUNT ON
--检查对象是否有效
IF OBJECT_ID(@tbname) IS NULL
BEGIN
RAISERROR(N'对象"%s"不存在',1,16,@tbname)
RETURN
END
IF OBJECTPROPERTY(OBJECT_ID(@tbname),N'IsTable')=0
AND OBJECTPROPERTY(OBJECT_ID(@tbname),N'IsView')=0
AND OBJECTPROPERTY(OBJECT_ID(@tbname),N'IsTableFunction')=0
BEGIN
RAISERROR(N'"%s"不是表、视图或者表值函数',1,16,@tbname)
RETURN
END

--分页字段检查
IF ISNULL(@FieldKey,N'')=''
BEGIN
RAISERROR(N'分页处理需要主键(或者惟一键)',1,16)
RETURN
END

--其他参数检查及规范
IF ISNULL(@PageCurrent,0)<1 SET @PageCurrent=1
IF ISNULL(@PageSize,0)<1 SET @PageSize=10
IF ISNULL(@FieldShow,N'')=N'' SET @FieldShow=N'*'
IF ISNULL(@FieldOrder,N'')=N''
SET @FieldOrder=N''
ELSE
SET @FieldOrder=N'ORDER BY '+LTRIM(@FieldOrder)
IF ISNULL(@Where,N'')=N''
SET @Where=N''
ELSE
SET @Where=N'WHERE ('+@Where+N')'

--如果@PageCount为NULL值,则计算总页数(这样设计可以只在第一次计算总页数,以后调用时,把总页数传回给存储过程,避免再次计算总页数,对于不想计算总页数的处理而言,可以给@PageCount赋值)
IF @PageCount IS NULL
BEGIN
DECLARE @sql nvarchar(4000)
SET @sql=N'SELECT @PageCount=COUNT(*)'
+N' FROM '+@tbname
+N' '+@Where
EXEC sp_executesql @sql,N'@PageCount int OUTPUT',@PageCount OUTPUT
SET @PageCount=(@PageCount+@PageSize-1)/@PageSize
END

--计算分页显示的TOPN值
DECLARE @TopN varchar(20),@TopN1 varchar(20)
SELECT @TopN=@PageSize,
@TopN1=@PageCurrent*@PageSize

--第一页直接显示
IF @PageCurrent=1
EXEC(N'SELECT TOP '+@TopN
+N' '+@FieldShow
+N' FROM '+@tbname
+N' '+@Where
+N' '+@FieldOrder)
ELSE
BEGIN
--生成主键(惟一键)处理条件
DECLARE @Where1 nvarchar(4000),@s nvarchar(1000)
SELECT @Where1=N'',@s=@FieldKey
WHILE CHARINDEX(N',',@s)>0
SELECT @s=STUFF(@s,1,CHARINDEX(N',',@s),N''),
@Where1=@Where1
+N' AND a.'+LEFT(@s,CHARINDEX(N',',@s)-1)
+N'='+LEFT(@s,CHARINDEX(N',',@s)-1)
SELECT @Where1=STUFF(@Where1+N' AND a.'+@s+N'='+@s,1,5,N''),
@TopN=@TopN1-@PageSize

--执行查询
EXEC(N'SET ROWCOUNT '+@TopN1
+N' SELECT '+@FieldKey
+N' INTO # FROM '+@tbname
+N' '+@Where
+N' '+@FieldOrder
+N' SET ROWCOUNT '+@TopN
+N' DELETE FROM #'
+N' SELECT '+@FieldShow
+N' FROM '+@tbname
+N' a WHERE EXISTS(SELECT * FROM # WHERE '+@Where1
+N') '+@FieldOrder)
END
wzy_love_sly 2008-06-27
  • 打赏
  • 举报
回复
用通用的足够了
wzy_love_sly 2008-06-27
  • 打赏
  • 举报
回复
CREATE PROC sp_PageView   
@sql ntext, --要执行的sql语句
@PageCurrent int=1, --要显示的页码
@PageSize int=10, --每页的大小
@PageCount int OUTPUT --总页数
AS
SET NOCOUNT ON
DECLARE @p1 int
--初始化分页游标
EXEC sp_cursoropen
@cursor=@p1 OUTPUT,
@stmt=@sql,
@scrollopt=1,
@ccopt=1,
@rowcount=@PageCount OUTPUT

--计算总页数
IF ISNULL(@PageSize,0)<1
SET @PageSize=10
SET @PageCount=(@PageCount+@PageSize-1)/@PageSize
IF ISNULL(@PageCurrent,0)<1 OR ISNULL(@PageCurrent,0)>@PageCount
SET @PageCurrent=1
ELSE
SET @PageCurrent=(@PageCurrent-1)*@PageSize+1

--显示指定页的数据
EXEC sp_cursorfetch @p1,16,@PageCurrent,@PageSize

--关闭分页游标
EXEC sp_cursorclose @p1


百万太小了
nzperfect 2008-06-27
  • 打赏
  • 举报
回复
连表查询如果你写成视图也可以用的。
lyfeixue 2008-06-27
  • 打赏
  • 举报
回复
看过你的分页了
也在系统中使用了
去年就在另外一个系统中采用了
要不你改造一下
改造成可以支持连表查询的吧
这样不是更好嘛?
nzperfect 2008-06-27
  • 打赏
  • 举报
回复
单表主键或多表联合有唯一键的情况下,百W后,我的分页效率会明显高于row_number分页。
lyfeixue 2008-06-27
  • 打赏
  • 举报
回复
正在安装2005
还是封装一下好一些
统一也是一种美吧
nzperfect 2008-06-27
  • 打赏
  • 举报
回复
2005的很简单,封不封成存储过程都行:
这是按表tb的id排序,然后取1到10条
select * from 
(select row_number() over (order by id) as nid,* from tb)as a
where nid between 1 and 10
lyfeixue 2008-06-27
  • 打赏
  • 举报
回复
那能不能提供一个SQL2005的
我马上升级我们的现有库
反正都无所谓的啦
系统还没正式发布
楼上的 帮忙下
nzperfect 2008-06-27
  • 打赏
  • 举报
回复
所有的分页,只要高效,全是有限制的,基本上都需要有唯一键,该键不可重复。
sql分页,无疑是top最快。其它用系统存储过程或set xxx的,都效率一般。
多表查询分页,本身就这个查询就有个效率的问题,只要能解决那么用通用分页,也是很高效。不过,都要写成视图。

如果是2005,用row_number()分页,效率很好,对付百W,应该没有问题。

lyfeixue 2008-06-27
  • 打赏
  • 举报
回复
楼上的我正在用
单表查询很好,试过百万数据,
现在我的查询是 主表:Ly_Position 副表:Ly_Company
两者都有ComID
查询主表的时候,顺便查询下副表中的CompanyName,Intro等信息
分页,最重要的是分页,还有效率,在另外的地方找了一个,但是效率特别低
超过3秒,每页100条数据,任意一页
nzperfect 2008-06-27
  • 打赏
  • 举报
回复
试我的
lyfeixue 2008-06-27
  • 打赏
  • 举报
回复
就是这样的SQL语句
Select C.ComID,C.CompanyName,C.Introduction,P.PositionID,P.RecruTime from Ly_Position As P join Ly_Company As C On P.ComID=C.ComID where C.CompanyName like '%keyword%'(可能有很多where条件) order
by P.PositionID Desc,C.ComID Desc.....

但是需要分页,而且数据量比较大,一次读入的话,肯定消耗很多时间,性价比的问题!
lyfeixue 2008-06-27
  • 打赏
  • 举报
回复
SQL2000
2G内存,酷睿1.6
lyfeixue 2008-06-27
  • 打赏
  • 举报
回复

SQL Server 执行时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。

SQL Server 执行时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。
SQL Server 分析和编译时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。

SQL Server 执行时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。

SQL Server 执行时间:
CPU 时间 = 918 毫秒,耗费时间 = 918 毫秒。

SQL Server 执行时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。

SQL Server 执行时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。

SQL Server 执行时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。

SQL Server 执行时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。



SQL Server 执行时间:
CPU 时间 = 13 毫秒,耗费时间 = 13 毫秒。

SQL Server 执行时间:
CPU 时间 = 16 毫秒,耗费时间 = 13 毫秒。

SQL Server 执行时间:
CPU 时间 = 0 毫秒,耗费时间 = 0 毫秒。



3楼的,从20来万数据中取得数据,分别在
AS
SET STATISTICS TIME ON
…………………………
SET STATISTICS TIME OFF
Go
加载更多回复(7)

22,210

社区成员

发帖
与我相关
我的任务
社区描述
MS-SQL Server 疑难问题
社区管理员
  • 疑难问题社区
  • 尘觉
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧