Parquet使用指南:一个超越CSV、提升数据处理效率的存储格式
前言 在大数据时代,数据存储和处理的效率越来越重要。 同时,我们在工作中处理的数据也越来越多,从excel格式到csv格式,从文件文档传输到直接从数据库提取,数据单位也从K到M再到G。 当数据量达到了G以上,几G甚至几十G,在使用py...
前言 在大数据时代,数据存储和处理的效率越来越重要。 同时,我们在工作中处理的数据也越来越多,从excel格式到csv格式,从文件文档传输到直接从数据库提取,数据单位也从K到M再到G。 当数据量达到了G以上,几G甚至几十G,在使用py...