开启辅助访问 切换到宽版

精易论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

用微信号发送消息登录论坛

新人指南 邀请好友注册 - 我关注人的新帖 教你赚取精币 - 每日签到


求职/招聘- 论坛接单- 开发者大厅

论坛版规 总版规 - 建议/投诉 - 应聘版主 - 精华帖总集 积分说明 - 禁言标准 - 有奖举报

查看: 3497|回复: 10
收起左侧

[分享] 大文本读取至列表框(超级列表框或虚表)

[复制链接]
结帖率:95% (19/20)
发表于 2017-10-30 15:39:03 | 显示全部楼层 |阅读模式   北京市北京市
论坛有很多生成的例子,但却没有导入的例子。。。

源文本 无非就是 账号----密码  这样,百万的数据在100M以内,不存在变量放不下这么一说

个人实现思路如下
用快速文本 先将整行的内容加载至文本数组中,测试双核CPU 处理200万行的数据需要6分钟
  
子程序名返回值类型公开备 注
子程序1  
参数名类 型参考可空数组备 注
文件文本型
变量名类 型静态数组备 注
text快速文本对象 
sz文本型0
sz_文本型0
账号文本型0
密码文本型0
i整数型 
调试输出 (取现行时间 ())
text.从文件读 (文件)
sz = text.分割文本 ( #换行符, )
.counter (取数组成员数 (sz), i)
sz_ = 分割文本 (sz [i], “----”, )
加入成员 (账号, sz_ [1])
加入成员 (密码, sz_ [2])
.CounterLoop ()
清除数组 (sz)
清除数组 (sz_)
调试输出 (取现行时间 ())


i支持库列表   支持库注释   
commobj通用对象支持库
spec特殊功能支持库

用打开文件在3分钟左右

  
子程序名返回值类型公开备 注
子程序1  
参数名类 型参考可空数组备 注
文件文本型
变量名类 型静态数组备 注
文件号整数型 
sz文本型0
账号文本型0
密码文本型0
i整数型 
调试输出 (取现行时间 ())
文件号 = 打开文件 (文件, , )
移到文件首 (文件号)
.while (是否在文件尾 (文件号, ))
sz = 分割文本 (读入一行 (文件号), “----”, )
加入成员 (账号, sz [1])
加入成员 (密码, sz [2])
.wend ()
清除数组 (sz)
调试输出 (取现行时间 ())


i支持库列表   支持库注释   
spec特殊功能支持库


光读取文件就已经用了3分钟,即使边读取边插入超级列表框都需要10分钟以上,
有没有大佬有更好的实现思路给个例子。


结帖率:100% (26/26)
发表于 2017-10-30 15:42:24 | 显示全部楼层   江西省赣州市
嘿嘿 学习下!!!!!
回复 支持 反对

使用道具 举报

结帖率:100% (8/8)
发表于 2017-10-30 15:56:46 | 显示全部楼层   浙江省杭州市
发错板块了吧
回复 支持 反对

使用道具 举报

结帖率:95% (19/20)
 楼主| 发表于 2017-10-30 16:06:23 | 显示全部楼层   北京市北京市

这个不应该是易求助?
回复 支持 反对

使用道具 举报

发表于 2017-10-30 16:11:48 | 显示全部楼层   广东省汕头市
  
变量名类 型静态数组备 注
i整数型 
超级列表框2.全部删除 ()
超级列表框2.可视 = 假
调试输出 (取现行时间 ())
计次循环首 (100000, i)
超级列表框2.插入表项 (-1, 到文本 (i), , , , )
计次循环尾 ()
调试输出 (取现行时间 ())
超级列表框2.可视 = 真
调试输出 (取现行时间 ())


i支持库列表   支持库注释   
iext扩展界面支持库一
spec特殊功能支持库

* [2017年10月30日15时58分46秒]
* [2017年10月30日15时58分51秒]
* [2017年10月30日15时59分57秒]

可以看出,在可视为假时,插入表项(),10W数据只用了5秒,到可视设置为真时,却用了66秒,才显示出来。同样的数据,在可视为真时,插入表项()及显示,花费的总时间在10倍以上(自己测试)。

用超级列表框显示全部数据,并不是一个合适的选择。考虑只显示N行,动态刷新显示数据就好。

回复 支持 反对

使用道具 举报

结帖率:97% (34/35)

签到天数: 1 天

发表于 2017-10-30 16:19:30 | 显示全部楼层   广东省东莞市
分批读取.不要一口气显示这么多数据.用户也没这个心情看你这么多数据!!
回复 支持 反对

使用道具 举报

结帖率:100% (53/53)

签到天数: 1 天

发表于 2017-10-30 16:51:55 | 显示全部楼层   福建省宁德市
分页1秒导入完毕
回复 支持 反对

使用道具 举报

结帖率:95% (19/20)
 楼主| 发表于 2017-10-30 18:55:44 | 显示全部楼层   北京市北京市
aqwvwv 发表于 2017-10-30 16:51
分页1秒导入完毕

大佬方便提供一下思路么
回复 支持 反对

使用道具 举报

结帖率:95% (19/20)
 楼主| 发表于 2017-10-30 19:24:52 | 显示全部楼层   北京市北京市
114775961 发表于 2017-10-30 16:11
[e=1].版本 2
.支持库 iext
.支持库 spec

感谢大佬给的思路,在不显示的情况下 实测50万导入需要4分钟,内存占用高达160M(超级列表框数据占用),跟我理想的速度还是有些差距
(数据文本账号密码均为6位数字)
回复 支持 反对

使用道具 举报

发表于 2017-10-30 22:24:05 | 显示全部楼层   广东省汕头市
可以参考精易模块的,外部超级列表框_保存数据_NEW,类:外部超级列表框.高速插入表项。
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则 致发广告者

发布主题 收藏帖子 返回列表

sitemap| 易语言源码| 易语言教程| 易语言论坛| 易语言模块| 手机版| 广告投放| 精易论坛
拒绝任何人以任何形式在本论坛发表与中华人民共和国法律相抵触的言论,本站内容均为会员发表,并不代表精易立场!
论坛帖子内容仅用于技术交流学习和研究的目的,严禁用于非法目的,否则造成一切后果自负!如帖子内容侵害到你的权益,请联系我们!
防范网络诈骗,远离网络犯罪 违法和不良信息举报QQ: 793400750,邮箱:wp@125.la
网站简介:精易论坛成立于2009年,是一个程序设计学习交流技术论坛,隶属于揭阳市揭东区精易科技有限公司所有。
Powered by Discuz! X3.4 揭阳市揭东区精易科技有限公司 ( 粤ICP备2025452707号) 粤公网安备 44522102000125 增值电信业务经营许可证 粤B2-20192173

快速回复 返回顶部 返回列表