arXivDaily arXiv每日学术速递 周一至周五更新
arXiv周末暂无论文更新,休息一下吧,周末愉快~~
arXiv 2602.17335cs.DBcs.DC
收藏

GPU 真的需要新的表格文件格式吗?

Do GPUs Really Need New Tabular File Formats?

TU Darmstadt(达姆施塔特工业大学);DFKI(德国人工智能研究中心)

Jigao Luo, Qi Chen, Carsten Binnig

AI总结:

研究 Parquet 配置对 GPU 扫描性能的影响,发现通过 GPU 感知的配置优化,无需修改格式即可大幅提升有效读取带宽。

摘要:

Parquet 是现代分析系统中事实上的列式文件格式,但其配置指南主要受 CPU 中心执行模型的影响。随着 GPU 加速数据处理日益普及,使用 CPU 导向默认值生成的 Parquet 文件会严重低估 GPU 并行性,使 GPU 扫描成为性能瓶颈。在这项工作中,我们系统地研究了 Parquet 配置如何影响 GPU 扫描性能。我们表明,Parquet 在 GPU 上的糟糕性能并非格式本身固有的,而是次优配置选择的结果。通过应用 GPU 感知的配置,我们在不修改 Parquet 规范的情况下将有效读取带宽提高到 125 GB/s。

英文摘要:

Parquet is the de facto columnar file format in modern analytical systems, yet its configuration guidelines have largely been shaped by CPU-centric execution models. As GPU-accelerated data processing becomes increasingly prevalent, Parquet files generated with CPU-oriented defaults can severely underutilize GPU parallelism, turning GPU scans into a performance bottleneck. In this work, we systematically study how Parquet configurations affect GPU scan performance. We show that Parquet's poor GPU performance is not inherent to the format itself but rather a consequence of suboptimal configuration choices. By applying GPU-aware configurations, we increase effective read bandwidth up to 125 GB/s without modifying the Parquet specification.

机构、总结、中文摘要均由AI分析而来,可能存在错误,请以论文正文为准。

↑