百万级数据excel导出功能如何实现?

博客园头条 2年前 (2023) cnblogshot
1.4K 0

内容简介:

前言
最近我做过一个MySQL百万级别数据的excel导出功能,已经正常上线使用了。
这个功能挺有意思的,里面需要注意的细节还真不少,现在拿出来跟大家分享一下,希望对你会有所帮助。
原始需求:用户在UI界面上点击全部导出按钮,就能导出所有商品数据。
咋一看,这个需求挺简单的。
但如果我告诉你,导出的记录条数,可能有一百多万,甚至两百万呢?
这时你可能会倒吸一口气。
因为你可能会面临如下问题:

如果同步导数据,接口很容易超时。
如果把所有数据一次性装载到内存,很容易引起OOM。
数据量太大sql语句必定很慢。
相同商品编号的数据要放到一起。
如果走异步,如何通知用户导出结果?
如果excel文...

查看原文

? 百万级数据excel导出功能如何实现?

版权声明:cnblogshot 发表于 2023-02-05 10:49:37。
转载请注明:百万级数据excel导出功能如何实现? | 程序员导航网

暂无评论

您必须登录才能参与评论!
立即登录
暂无评论...