PIVOTAL GPDB- 外部表 gphdfs 協議命令以錯誤結束。 sh：java：找不到命令

Question

我們有一小部分Greenplum數據庫。

嘗試讀取其中的外部表時。 獲取錯誤

proddb=# select count(*) from ext_table;
ERROR:  external table gphdfs protocol command ended with error. sh: java: command not found  (seg0 slice1 sdw:
40000 pid=8675)
DETAIL:  
Command: 'gphdfs://path/to/hdfs External table revenuereport_stg0, file gphdfs://Path/to/hdfs

我們嘗試了 ：

在 greenplum 主控主機上檢查 Java 環境。

還檢查了，設置 - GPDB 的參數

[gpadmin@admin ~]$ gpconfig -c gp_hadoop_home -v "'/usr/lib/gphd'" [gpadmin@admin ~]$ gpconfig -c gp_hadoop_target_version -v "'gphd-2.0'"

但它因這個錯誤而失敗

[gpadmin@mdw ~]$ gpconfig -c gp_hadoop_home -v "'/usr/lib/gphd'"
20170123:02:02:04:017762 gpconfig:mdw:gpadmin-[ERROR]:-failed updating the postgresql.conf files on host: sdw
20170123:02:02:04:017762 gpconfig:mdw:gpadmin-[ERROR]:-failed updating the postgresql.conf files on host: mdw
20170123:02:02:09:017762 gpconfig:mdw:gpadmin-[ERROR]:-finished with errors

因此，從 greenplum 主機測試 HDFS 訪問不起作用。

Checked if  HDFS is accessible from any of the segment servers

[gpadmin@sdw1 ~]$hdfs dfs -ls hdfs://hdm2:8020/

任何幫助將不勝感激！

Answer 1

對我來說這看起來像是路徑問題。請在 hadoop-env.sh 文件中設置正確的 JAVA_HOME

另外，請查看以下文章以更好地了解使用 gpdb 配置 gphdfs。

https://discuss.pivotal.io/hc/en-us/articles/202635496-How-to-access-HDFS-data-via-GPDB-external-table-with-gphdfs-protocol

https://discuss.pivotal.io/hc/en-us/articles/203083906-Understanding-GPHDFS-Configurations

https://discuss.pivotal.io/hc/en-us/articles/221492507-One-time-HDFS-Protocol-Installation-for-GPHDFS-access-to-HDP-2-x-cluster

感謝 Pratheesh Nair

Answer 2

export JAVA_HOME=/usr/local/jdk18
export HADOOP_HOME=/opt/apps/hadoop
export GP_JAVA_OPT='-Xmx1000m -XX:+DisplayVMOutputToStderr'
export PATH=$JAVA_HOME/bin:$PATH
export KRB5CCNAME=$GP_SEG_DATADIR/gpdb-gphdfs.krb5cc
JAVA=$JAVA_HOME/bin/java

java_home和had_home要給具體的狀態，oop=最前面，寫成從環境出發獲取JAVA_HOME$JAVA_HOME，處理時獲取會為空值。