代码之家 › 专栏 › 技术社区 › conradlee

bigquery csv导出到gcs:将内容类型头设置为“text/csv”

google-bigquery

conradlee · 技术社区 · 7 年前

我将把一个bigquery表作为csv导出到一个公共的google cloud bucket中。从那里我可以通过HTTP公开托管它。bigquery export(aka extract)功能似乎没有正确设置文件的谷歌云存储元数据。

导出器将内容类型字段设置为 application/octet-stream . 因为它是一个csv文件,所以我希望将其设置为 text/csv (或者也许 text/plain )为什么?如谷歌概述 here 因为各种原因,这是最佳实践。

我看不出 api documentation 来控制这个。

另一个问题:当我设置 configuration.extract.compression 成为 GZIP ,GCS中的结果文件没有 Content-Encoding 属性设置为“gzip”。如果出口商也这样做,那就太好了!

1 回复 | 直到 7 年前

Iñigo 7 年前

作为文件 [1] 说, application/octet-stream 在上载程序未指定内容类型时设置。在本例中,bq export是上载程序,您不能指定它,它将被设置为上载程序。我看到您创建了一个功能请求请求。

解决方法是编辑gcs bucket中每个文件的元数据。您可以通过使用UI、控制台或编码来实现这一点。 [2] .

推荐文章

Joe · 为什么这两个查询之间的性能存在如此大的差异?

1 年前

David542 · 除了显示其他字段

1 年前

Jamal Khan · 如何从Google大查询表中的大数据集中删除重复数据?

1 年前

ENRICO PEGORARO · R BigQuery:以拼花地板格式将数据导出到谷歌云存储

1 年前

user2707590 · 创建动态任务映射时,如何在BigQueryInsertJobOperator“params”中使用XComArg?

1 年前

KG1 · BigQuery-较大的查询在子查询抛出错误时执行

1 年前

Iren Ramadhan · 检查两个日期字段是否正好有一个月的间隔(相同日期)的逻辑,即2月28日和3月28日

1 年前

holzben · BigQuery `LIKE ANY`和`NOT LIKE ANY`

1 年前

NaiveBae · 如果我可以查询BigQuery表,但在资源管理器面板中找不到该表,我如何访问该表的元数据?

1 年前

Matt · BigQuery-当子查询不返回结果时,所有结果为零

1 年前