以文本方式查看主题

-  Foxtable(狐表)  (http://foxtable.com/bbs/index.asp)
--  专家坐堂  (http://foxtable.com/bbs/list.asp?boardid=2)
----  讨论一个速度问题  (http://foxtable.com/bbs/dispbbs.asp?boardid=2&id=40353)

--  作者:blackzhu
--  发布时间:2013/9/16 14:50:00
--  讨论一个速度问题
     比如一个月的数据有差不多2-3万条数据.利用条件加载数据比如在1-2万条到系统内(前提是一个月的数据加载,有时是一年,那就是20多万条,局域网.).然后利用代码生成统计数据,时间在20秒左右正不正常?

    如果利用条件和SQL语句来做成临时表 再生成统计数据 速度是不是比加载到系统内再生成速度来的快一些? 数据量一样的.

    
[此贴子已经被作者于2013-9-16 14:58:10编辑过]

--  作者:Bin
--  发布时间:2013/9/16 14:52:00
--  
后者更快一点.
--  作者:blackzhu
--  发布时间:2013/9/16 14:59:00
--  
我想想也是 但是 速度 一般是快多少. 因为前者是有一个加载的过程.
--  作者:Bin
--  发布时间:2013/9/16 15:05:00
--  
测试一下才知道.
--  作者:blackzhu
--  发布时间:2013/9/16 15:07:00
--  
明白了 有这个说法 就 可以了
--  作者:jspta
--  发布时间:2013/9/16 17:25:00
--  
以下是引用blackzhu在2013-9-16 15:07:00的发言:
明白了 有这个说法 就 可以了

外部数据源直接统计,如果是SQL2005时间应该忽略不计。

目前我特意弄了张表,每天大概增加500-1000条数据,一月差不多2W多,目前表里面有12W多数据,查询或更新一次,没有感觉到任何卡顿。

 

另,似乎新版本对于Load的优化有问题,数据量(数万)同步表,直接卡死。但如果直接加载,则没有问题

[此贴子已经被作者于2013-9-16 17:27:18编辑过]

--  作者:布莱克朱
--  发布时间:2013/9/16 20:24:00
--  
   我本来的作法是加载数据到系统内,再统计,但是因为是数据量的问题,加载需要时间,所以生成统计有些慢,现在用SQL语句直接生成临时表,再统计我想速度要快的多,因为少了一个加载过程.
--  作者:逛逛
--  发布时间:2013/9/16 20:39:00
--  

存储过程,传参直接返回统计结果,再用狐表处理:排序,合并