以文本方式查看主题 - Foxtable(狐表) (http://foxtable.com/bbs/index.asp) -- 专家坐堂 (http://foxtable.com/bbs/list.asp?boardid=2) ---- 讨论一个速度问题 (http://foxtable.com/bbs/dispbbs.asp?boardid=2&id=40353) |
-- 作者:blackzhu -- 发布时间:2013/9/16 14:50:00 -- 讨论一个速度问题 比如一个月的数据有差不多2-3万条数据.利用条件加载数据比如在1-2万条到系统内(前提是一个月的数据加载,有时是一年,那就是20多万条,局域网.).然后利用代码生成统计数据,时间在20秒左右正不正常? 如果利用条件和SQL语句来做成临时表 再生成统计数据 速度是不是比加载到系统内再生成速度来的快一些? 数据量一样的.
[此贴子已经被作者于2013-9-16 14:58:10编辑过]
|
-- 作者:Bin -- 发布时间:2013/9/16 14:52:00 -- 后者更快一点. |
-- 作者:blackzhu -- 发布时间:2013/9/16 14:59:00 -- 我想想也是 但是 速度 一般是快多少. 因为前者是有一个加载的过程. |
-- 作者:Bin -- 发布时间:2013/9/16 15:05:00 -- 测试一下才知道. |
-- 作者:blackzhu -- 发布时间:2013/9/16 15:07:00 -- 明白了 有这个说法 就 可以了 |
-- 作者:jspta -- 发布时间:2013/9/16 17:25:00 -- 以下是引用blackzhu在2013-9-16 15:07:00的发言:
明白了 有这个说法 就 可以了 外部数据源直接统计,如果是SQL2005时间应该忽略不计。 目前我特意弄了张表,每天大概增加500-1000条数据,一月差不多2W多,目前表里面有12W多数据,查询或更新一次,没有感觉到任何卡顿。
另,似乎新版本对于Load的优化有问题,数据量(数万)同步表,直接卡死。但如果直接加载,则没有问题 [此贴子已经被作者于2013-9-16 17:27:18编辑过]
|
-- 作者:布莱克朱 -- 发布时间:2013/9/16 20:24:00 -- 我本来的作法是加载数据到系统内,再统计,但是因为是数据量的问题,加载需要时间,所以生成统计有些慢,现在用SQL语句直接生成临时表,再统计我想速度要快的多,因为少了一个加载过程. |
-- 作者:逛逛 -- 发布时间:2013/9/16 20:39:00 -- 存储过程,传参直接返回统计结果,再用狐表处理:排序,合并 |