ファイル数 ファイルサイズ 合計サイズ CSV (圧縮なし) CSV (GZIP圧縮) Parquet (Snappy圧縮) 1件 10GB 10GB 3.88秒 247.88秒 エラー発生 10件 1GB 10GB 3.87秒 29.27秒 1.85秒 100件 100MB 10GB 3.57秒 4.48秒 1.85秒 1,000件 10MB 10GB 3.36秒 3.26秒 2.24秒 10,000件 1MB 10GB 4.07秒 4.17秒 2.76秒 100,000件 100KB 10GB 11.51秒 12.62秒 11.68秒 1,000,000件 10KB 10GB 92.95秒 91.38秒 76.35秒 10,000,000件 1KB 10GB 90.17秒 900秒超 900秒超 著しく性能劣化するケースがある ※ファイル数については、おおよその目安の数