以文本方式查看主题

-  Foxtable(狐表)  (http://foxtable.net/bbs/index.asp)
--  专家坐堂  (http://foxtable.net/bbs/list.asp?boardid=2)
----  数据加载System.OutOfMemoryException错误问题  (http://foxtable.net/bbs/dispbbs.asp?boardid=2&id=173931)

--  作者:benwong2015
--  发布时间:2021/12/23 8:43:00
--  数据加载System.OutOfMemoryException错误问题
因靠近年底需要进行今年及往年的数据加载的分析,在加载的时候会将往年的数据全部加载,大约60W条以上的数据,之前在使用20200119高级开发版正常,但今年双11重新升级为永久高级版,每次加载数据超过一定的数量就会提示
System.OutOfMemoryException的错误,即使新建一个项目直接连SQL加载数据不在表属性设置参数也会出现这样的问题;如果卸载掉新版的,直接安装旧的版本的话,就没有问题,请确认是否新版存在这样的bug,谢谢!


--  作者:有点蓝
--  发布时间:2021/12/23 9:12:00
--  
加载过多数据什么版本都有问题,任何软件都有问题。难道如果数据量上到600W、6000W也全部加载?明显是不现实的。可以考虑分页,或者按季度,月度分批处理。

一个常见的用法是专门做一个项目,放到服务器,每晚半夜无人使用的时候自动对过往的数据(按月,季度、年度等等)进行统计,把统计结果保存下来,需要的时候直接调用统计结果即可。