首页 文章

使用Beam将Avro写入BigQuery

提问于
浏览
0

Q1:假设我使用BigQuery加载工具加载Avro编码数据 . 现在我需要将这些数据写入仍然采用Avro格式的不同表格 . 我试图测试不同的分区,以测试表性能 . 如何使用Beam将SchemaAndRecord写回BigQuery?在这种情况下,模式检测也会工作吗?

Q2:从Avro架构类型转换为BigQuery架构类型时,看起来架构信息会丢失 . 例如,在BigQuery中,double和float Avro类型都转换为FLOAT类型 . 这是预期的吗?

1 回答

相关问题