欢迎访问 生活随笔!

生活随笔

当前位置: 首页 > 编程语言 > python >内容正文

python

python读取oracle数据到hvie parquet_创建Hive表来从parquet / avro模式读取parquet文件

发布时间:2024/9/27 python 37 豆豆
生活随笔 收集整理的这篇文章主要介绍了 python读取oracle数据到hvie parquet_创建Hive表来从parquet / avro模式读取parquet文件 小编觉得挺不错的,现在分享给大家,帮大家做个参考.

We are looking for a solution in order to create an external hive table to read data from parquet files according to a parquet/avro schema.

in other way, how to generate a hive table from a parquet/avro schema ?

thanks :)

解决方案

Try below using avro schema:

CREATE TABLE avro_test ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.avro.AvroSerDe' STORED AS AVRO TBLPROPERTIES ('avro.schema.url'='myHost/myAvroSchema.avsc');

CREATE EXTERNAL TABLE parquet_test LIKE avro_test STORED AS PARQUET LOCATION 'hdfs://myParquetFilesPath';

总结

以上是生活随笔为你收集整理的python读取oracle数据到hvie parquet_创建Hive表来从parquet / avro模式读取parquet文件的全部内容,希望文章能够帮你解决所遇到的问题。

如果觉得生活随笔网站内容还不错,欢迎将生活随笔推荐给好友。