过滤并导入非常庞大的XML(或CSV)

u7up0aaq  于 2023-04-03  发布在  其他
关注(0)|答案(1)|浏览(114)

我有一个非常巨大的xml文件(或csv我有两个文件),我们正在谈论数以百万计的产品重量5/6 GB。从这个目录,我想创建一个表(mysql o sql服务器)只有一些品牌的广告导入。
我尝试导入整个目录然后过滤它,但是导入过程停止,因为文件太大了!我该怎么办?

4jb9z9bj

4jb9z9bj1#

谢谢你的回答。让我更详细地解释我正在努力做的事情:我试图通过mysql workbench在xml中本地导入icecat目录,但我发现有导入限制。然后我试图绕过LOAD DATA INFILE查询的问题,但由于文件太大,它给了我内存问题。我甚至无法用excel打开文件。然后我切换到sql server,看看是否可以导入文件并以不同的方式解决问题,但它仍然给我的记忆问题。同样的尝试csv。
我不需要导入整个目录,只需要导入其中的一部分,但是我不知道如何(以及是否可能)在导入之前过滤xml(或csv),以便创建一个只包含我感兴趣的记录(行和列)的表。

相关问题