代码之家 › 专栏 › 技术社区 › Jay

可以用pyarrow写拼花统计吗?

pyarrow parquet

0

Jay · 技术社区 · 6 年前

write_table() .pyx ,我找不到像min/max这样的东西。

1 回复 | 直到 6 年前

1

Uwe L. Korn 6 年前

pyarrow 默认情况下,已写入拼花文件的最小/最大统计信息。在这方面没有选择作为基础 parquet-cpp 图书馆总是这样写。在写入时,只写入min和max。其他统计数据既不能提供,也不能用 拼花地板 . 当你需要它们时,你应该在 (Py)Arrow's issue tracker

推荐文章

Jay · 对Pyarrows的HdfsClient使用多处理

7 年前

Mulgard · 如何将大熊猫数据帧保存到hdfs?

7 年前

Martin Studer · 从拼花文件读取/写入pyarrow张量

7 年前