在 teradata 的 parquet 文件中導出數據
[英]Export data in parquet file in teradata
問題描述
我無法找出以鑲木地板格式從 Teradata 數據庫導出數據的解決方案。 我正在使用需要生成 tpt 腳本的 tdload 和 tbuild 方法。
從 Teradata 數據庫導出鑲木地板文件的解決方案應該是什么？
tdload 命令 -
tdload --SourceTdpid 192.168.xx.xx --SourceUserName dbc --SourceUserPassword dbc --SourceTable AdventureDW.FactProductInventory --TargetTextDelimiter "|" --FileWriterFileSizeMax 30G --TargetFilename F:\Data\data.parquet My_Unload_Job
我應該對命令進行哪些更改以獲取鑲木地板格式的輸出？
1 個解決方案
解決方案1
0 2022-05-17 11:04:43
我能夠通過 dask 框架將數據從 csv 轉換為 parquet 格式。 在這里發布提取，使用 pyarrow 引擎我能夠通過 dask 框架將大型 csv 數據集轉換為內置 parquet 函數
spark-未定義架構，在以下位置未找到Parquet數據文件或摘要文件
[英]spark - No schema defined, and no Parquet data file or summary file found under
使用 Dask read parquet 讀取具有不同數據類型（如十進制）的鑲木地板文件時出現問題
[英]Issue while reading a parquet file with different data types like decimal using Dask read parquet
在保留數據類型的同時導出熊貓數據框的格式是什么？ 不是 CSV； Sqlite？ 鑲木地板？
[英]What format to export pandas dataframe while retaining data types? Not CSV; Sqlite? Parquet?
如何減少 Python 代碼將數據寫入鑲木地板文件所花費的時間？
[英]how to decrease time taken by the Python code to write data to parquet file?
上傳到 Azure Data Lake gen 2 后 Parquet 文件不可讀（Python）
[英]Parquet file after upload to Azure Data Lake gen 2 not readable (Python)
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
相關問題
將數據增量地寫入鑲木地板文件
將數據導出到python文件中
spark-未定義架構，在以下位置未找到Parquet數據文件或摘要文件
使用 Dask read parquet 讀取具有不同數據類型（如十進制）的鑲木地板文件時出現問題
在保留數據類型的同時導出熊貓數據框的格式是什么？ 不是 CSV； Sqlite？ 鑲木地板？
字符串數據中的鑲木地板文件的大小是否大於 csv？
如何減少 Python 代碼將數據寫入鑲木地板文件所花費的時間？
如何讀取 python 中的 data.parquet.gz 文件？
如何使用鑲木地板文件中的 python 將數據寫入雪花
上傳到 Azure Data Lake gen 2 后 Parquet 文件不可讀（Python）
相關標簽