标题:Qt数据库应用5-海量数据多线程导出
作者:liudianwu
日期:2022-01-21 09:31
内容:
## 一、前言
做数据导出，少量的数据比如10W级别以下的，基本上直接占用主线程也是很快的就可以处理完，上了百万级别的数据量以后，就会发现性能极速下降，很容易卡主整体界面，于是这部分处理必须要用到线程，本数据导出到xls组件采用xml格式的数据，固定的头部和尾部数据，中间是一行行的数据，于是需要把这部分移到线程执行，用户主动初始化类以后调用open方法打开文件，并先输出好头部数据，然后开启线程，调用append方法逐行输出数据，百万千万级别也可以慢慢输出，线程排队输出到文件，最后用户主动调用close关闭文件，输出尾部数据，形成最终的文件。
数据导出到xls基本步骤：
- 打开文件，采用QTextStream输出数据到文件。
- 输出固定头部信息。
- 输出文档信息。
- 输出边框样式。
- 输出表结构。
- 输出字段名称。
- 逐行输出数据。
- 输出固定尾部信息。
## 二、功能特点
1. 组件同时集成了导出数据到csv、xls、pdf和打印数据。
2. 所有操作全部提供静态方法无需new，数据和属性等各种参数设置采用结构体数据，极为方便。
3. 同时支持QTableView、QTableWidget、QStandardItemModel、QSqlTableModel等数据源。
4. 提供静态方法直接传入QTableView、QTableWidget控件，自动识别列名、列宽和数据内容。
5. 每组功能都提供单独的完整的示例，注释详细，非常适合各阶段Qter程序员。
6. 原创导出数据机制，不依赖任何office组件或者操作系统等第三方库，支持嵌入式linux。
7. 速度超快，9个字段10万行数据只需要2秒钟完成。
8. 只需要四个步骤即可开始急速导出海量数据比如100W条记录到Excel。
9. 同时提供直接写入数据接口和多线程写入数据接口，不卡主界面。
10. 可设置标题、副标题、表名。
11. 可设置导出数据的字段名、列名、列宽。
12. 可设置末尾列自动拉伸填充，默认拉伸更美观。
13. 可设置是否启用校验过滤数据，启用后符合规则的数据特殊颜色显示。
14. 可指定校验的列、校验规则、校验值、校验值数据类型。
15. 校验规则支持 精确等于==、大于>、大于等于>=、小于