ホームページ  >  に質問  >  本文

centos - gpload データ読み込みの問題

データ実装ダウンロード过中一直报错:
-f my.yml
2017-04-25 16:22:18|INFO|セッションが開始されました 2017-04-25 16:22:18
2017-04-25 16:22:18|情報|テーブル 'test' のスキーマ 'public' を設定します
2017-04-25 16:22:18|情報| gpfdist -p 8000 -P 8001 -f "/home/gpadmin/extend/test2" を開始しました。 -t 30
2017-04-25 16:22:18||gpload 制御ファイルの処理エラーが発生しました。設定には csv 形式のデータの gpload:input:quote が含まれている必要があります
2017-04-25 16:22:18|INFO|rows Inserted = 0
2017-04-25 16:22:18|INFO|rows Updated = 0
2017 -04-25 16:22:18|情報|データ形式エラー = 0
2017-04-25 16:22:18|情報|失敗しました

my.ymlの内容:

リーリー

test2.内容:
6|102900928|product_conume|4290000100005|0
7|102900929|product_conume|3260000100006|0

のdeugモード:
2017-04-25 16:28:30|DEBUG|バージョンの構成を取得中
2017-04-25 16:28:30|DEBUG|バージョンを試行中
2017-04-25 16:28:30 |デバッグ|見つかったバージョン
2017-04-25 16:28:30|情報|セッションが開始されました 2017-04-25 16:28:30
2017-04-25 16:28:30|DEBUG|config {u'database': u'ljlj-test', u'host': u'mdw', u'version': u'1.0.0.1'、u'user': u'gpadmin'、u'': {u'input': [{u'source': {u'local_hostname': [u'mdw' ]、u'ポート': 8000、u'': [u'/home/gpadmin/extend/test2.']}}、{u'columns': [{u'id': u'int'}、{ u'pact_number': u'varchar(50)'}、{u'grant_type': u'varchar(50)'}、{u'ticket_usecode': u'varchar(100)'}、{u'pact_id': u'int'}]}、{u'format': u''}、{u'delimiter': u'|'}、{u'error_limit': 25}、{u'error_table': u'test_err' }]、u'output': [{u'table': u'test'}、{u'mode': u'INSERT'}]}、u'port': 5432}
2017-04-25 16:28:30|DEBUG|:output の設定を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017-04-25 16:28:30|DEBUG|見つかりました
2017-04-25 16:28:30|DEBUG|出力を試しています
2017-04-25 16:28:30|DEBUG|出力が見つかりました
2017-04-25 16:28:30|DEBUG|:output の設定を取得しています:table
2017-04-25 16:28:30|DEBUG|試行中
2017-04-25 16:28:30|DEBUG|見つかった
2017-04-25 16:28:30|DEBUG|出力を試行中
2017 -04-25 16:28:30|DEBUG|出力が見つかりました
2017-04-25 16:28:30|DEBUG|テーブルを試しています
2017-04-25 16:28:30|DEBUG|テーブルが見つかりました
2017-04 -25 16:28:30|デバッグ|ホストの構成を取得中
2017-04-25 16:28:30|デバッグ|ホストを試行中
2017-04-25 16:28:30|デバッグ|ホストが見つかりました
2017-04 -25 16:28:30|デバッグ|ポートの設定を取得中
2017-04-25 16:28:30|デバッグ|ポートを試行中
2017-04-25 16:28:30|デバッグ|ポートが見つかりました
2017-04 -25 16:28:30|デバッグ|ユーザーの構成を取得中
2017-04-25 16:28:30|デバッグ|ユーザーを試行中
2017-04-25 16:28:30|デバッグ|ユーザーが見つかりました
2017-04 -25 16:28:30|デバッグ|データベースの構成を取得中
2017-04-25 16:28:30|デバッグ|データベースを試行中
2017-04-25 16:28:30|デバッグ|データベースが見つかりました
2017-04 -25 16:28:30|デバッグ|パスワードの設定を取得しています
2017-04-25 16:28:30|デバッグ|パスワードを試行しています
2017-04-25 16:28:30|デバッグ|接続文字列: user=gpadmin host=mdw port=5432 database=ljlj-test
2017-04-25 16:28:30|DEBUG|データベースに正常に接続しました
2017-04-25 16:28:30|INFO|テーブルのスキーマ 'public' を設定'テスト'
2017-04-25 16:28:30|デバッグ|入力列が見つかりました: [u'"id"', u'integer', None, False]
2017-04-25 16:28:30| DEBUG|入力列が見つかりました: [u'"pact_number"', u'charactervariing(50)', None, False]
2017-04-25 16:28:30|DEBUG|入力列が見つかりました: [u'"grant_type "', u'charactervariing(50)', None, False]
2017-04-25 16:28:30|DEBUG|入力列が見つかりました: [u'"ticket_usecode"', u'charactervariing(100)' 、なし、False]
2017-04-25 16:28:30|デバッグ|入力列が見つかりました: [u'"pact_id"', u'integer'、なし、False]
2017-04-25 16:28: 30|デバッグ|:input:columns の構成を取得しています
2017-04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28 :30|デバッグ|入力を試しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28:30|デバッグ|列を試しています
2017-04-25 16:28:30 |DEBUG|見つかった列
2017-04-25 16:28:30|DEBUG|列からの列は次のとおりです:
2017-04-25 16:28:30|DEBUG|id: int
2017-04-25 16:28: 30|DEBUG|pact_number: varchar(50)
2017-04-25 16:28:30|DEBUG|grant_type: varchar(50)
2017-04-25 16:28:30|DEBUG|ticket_usecode: varchar(100)
2017-04-25 16:28:30|DEBUG|pact_id: int
2017-04-25 16:28:30|DEBUG|:output:mapping の設定を取得中
2017-04-25 16:28:30| DEBUG|試行中
2017-04-25 16:28:30|DEBUG|見つかった出力
2017-04-25 16:28:30|DEBUG|出力を試行中
2017-04-25 16:28:30|DEBUG|出力が見つかった
2017-04-25 16:28:30|デバッグ|マッピングを試行しています
2017-04-25 16:28:30|デバッグ|"id": integer = "id"
2017-04-25 16:28:30 |DEBUG|"pact_number": 文字の変化(50) = "pact_number"
2017-04-25 16:28:30|DEBUG|"grant_type": 文字の変化(50) = "grant_type"
2017-04-25 16:28:30|DEBUG|"ticket_usecode": 文字変化(100) = "ticket_usecode"
2017-04-25 16:28:30|DEBUG|"pact_id": integer = "pact_id"
2017-04-25 16:28:30|DEBUG|:input の設定を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017-04-25 16:28:30|DEBUG|見つかりました
2017 -04-25 16:28:30|DEBUG|入力を試行しています
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|:input: の設定を取得していますソース(1)
2017-04-25 16:28:30|DEBUG|試行中
2017-04-25 16:28:30|DEBUG|見つかった
2017-04-25 16:28:30|DEBUG|入力を試行中
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|ソース(1)を試しています
2017-04-25 16:28:30|DEBUG|見つかりましたソース
2017-04-25 16:28:30|DEBUG|:input:source(1):local_hostnameの構成を取得中
2017-04-25 16:28:30|DEBUG|試行中
2017-04-25 16: 28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試行しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28:30 |DEBUG|ソース(1)を試しています
2017-04-25 16:28:30|DEBUG|ソースが見つかりました
2017-04-25 16:28:30|DEBUG|local_hostnameを試しています
2017-04-25 16:28: 30|デバッグ|ローカルホスト名が見つかりました
2017-04-25 16:28:30|デバッグ|:input:source:ssl の設定を取得しています
2017-04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試行しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28 :30|デバッグ|ソースを試しています
2017-04-25 16:28:30|デバッグ|ソースが見つかりました
2017-04-25 16:28:30|デバッグ|SSLを試しています
2017-04-25 16:28:30 |DEBUG|:input:source:certificates_path の構成を取得しています
2017-04-25 16:28:30|DEBUG|試行中
2017-04-25 16:28:30|DEBUG|見つかりました
2017-04-25 16: 28:30|デバッグ|入力を試しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28:30|デバッグ|ソースを試しています
2017-04-25 16:28: 30|デバッグ|ソースが見つかりました
2017-04-25 16:28:30|デバッグ|証明書パスを試行しています
2017-04-25 16:28:30|デバッグ|:input:source(1):port の設定を取得しています
2017 -04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試しています
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|ソース(1)を試しています
2017-04-25 16:28:30|DEBUG|ソースが見つかりました
2017-04- 25 16:28:30|DEBUG|ポートを試しています
2017-04-25 16:28:30|DEBUG|ポートが見つかりました
2017-04-25 16:28:30|DEBUG|:input:source(1 の構成を取得しています) ):port_range
2017-04-25 16:28:30|DEBUG|試行中
2017-04-25 16:28:30|DEBUG|見つかった
2017-04-25 16:28:30|DEBUG|入力を試行中
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|ソース(1)を試しています
2017-04-25 16:28:30|DEBUG|ソースが見つかりました
2017-04-25 16:28:30|DEBUG|port_range を試しています
2017-04-25 16:28:30|DEBUG|:input:source(1):
2017-04-25 16:28 :30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28:30|デバッグ|ソース(1)を試しています
2017-04-25 16:28:30|デバッグ|ソースが見つかりました
2017-04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|DEBUG|:input:max_line_length の構成を取得中
2017-04-25 16:28:30|DEBUG|試行中
2017-04-25 16:28:30|DEBUG|found
2017-04-25 16:28:30|DEBUG|入力を試行中
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|max_line_length を試行しています
2017 -04-25 16:28:30|DEBUG|:input:transform の構成を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017-04-25 16:28:30|DEBUG|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28:30|デバッグ|変換を試しています
2017- 04-25 16:28:30|DEBUG|:input:transform_config の構成を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017-04-25 16:28:30|DEBUG|見つかりました
2017 -04-25 16:28:30|デバッグ|入力を試しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28:30|デバッグ|transform_configを試しています
2017-04 -25 16:28:30|ログ|gpfdist -p 8000 -P 8001 -f "/home/gpadmin/extend/test2" を実行しようとしています。 -t 30 -V
2017-04-25 16:28:30|LOG|gpfdist は次のように述べています: 2017-04-25 16:28:30 11767 INFO リスニング ソケットを開く前に - 次のリスニング ソケットが利用可能です:
2017-04- 25 16:28:30|DEBUG|gpfdist: [msg] libevent using: epoll
2017-04-25 16:28:30|LOG|gpfdist 曰く: 2017-04-25 16:28:30 11767 INFO IPV6 ソケット: [::]:8000
2017-04-25 16:28:30|DEBUG|gpfdist:
2017-04-25 16:28:30|LOG|gpfdist は言います: 2017-04-25 16:28:30 11767情報 IPV4 ソケット: 0.0.0.0:8000
2017-04-25 16:28:30|LOG|gpfdist の発言: 2017-04-25 16:28:30 11767 情報 リスニングソケットを開こうとしています:
2017-04-25 16:28:30|LOG|gpfdist の発言: 2017-04-25 16:28:30 11767 情報 IPV6 ソケット: [::]:8000
2017-04-25 16:28:30|LOG|gpfdist の発言: 2017 -04-25 16:28:30 11767 警告アドレスはすでに使用されています (errno = 98)、ポート: 8000
2017-04-25 16:28:30|LOG|gpfdist の発言: 2017-04-25 16:28: 30 11767 INFO リスニング ソケットを開こうとしています:
2017-04-25 16:28:30|LOG|gpfdist のメッセージ: 2017-04-25 16:28:30 11767 INFO IPV4 ソケット: 0.0.0.0:8000
2017-04 -25 16:28:30|LOG|gpfdist のメッセージ: 2017-04-25 16:28:30 11767 警告 アドレスはすでに使用されています (errno = 98)、ポート: 8000
2017-04-25 16:28:30| LOG|gpfdist の発言:
2017-04-25 16:28:30|LOG|gpfdist の発言: 2017-04-25 16:28:30 11767 情報 リスニング ソケットを開く前に - 次のリスニング ソケットが利用可能です:
2017-04- 25 16:28:30|LOG|gpfdist は言います: 2017-04-25 16:28:30 11767 情報 IPV6 ソケット: [::]:8001
2017-04-25 16:28:30|LOG|gpfdist は言います: 2017-04-25 16:28:30 11767 INFO IPV4 ソケット: 0.0.0.0:8001
2017-04-25 16:28:30|LOG|gpfdist は言います: 2017-04-25 16:28:30 11767 INFO 試していますリスニングソケットを開くには:
2017-04-25 16:28:30|LOG|gpfdist は次のように言います: 2017-04-25 16:28:30 11767 INFO IPV6 ソケット: [::]:8001
2017-04-25 16 :28:30|LOG|gpfdist の発言: 2017-04-25 16:28:30 11767 情報 リスニング ソケットのオープンに成功しました
2017-04-25 16:28:30|LOG|gpfdist の発言: 2017-04-25 16: 28:30 11767 INFO リスニング ソケットを開こうとしています:
2017-04-25 16:28:30|LOG|gpfdist の発言: 2017-04-25 16:28:30 11767 INFO IPV4 ソケット: 0.0.0.0:8001
2017-04-25 16:28:30|LOG|gpfdist は次のように述べています: 2017-04-25 16:28:30 11767 警告アドレスはすでに使用されています (errno = 98)、ポート: 8001
2017-04-25 16:28 :30|LOG|gpfdist のメッセージ: ポート 8001、ディレクトリ /home/gpadmin/extend で HTTP を提供しています
2017-04-25 16:28:30|INFO|started gpfdist -p 8000 -P 8001 -f "/home/gpadmin /extend/test2.」 -t 30 -V
2017-04-25 16:28:30|LOG|gpfdist はポート 8001 で実行中です
2017-04-25 16:28:30|DEBUG|:input:source:ssl の設定を取得しています
2017 -04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試しています
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|ソースを試しています
2017-04-25 16:28:30|DEBUG|ソースが見つかりました
2017-04-25 16: 28:30|デバッグ|SSLを試しています
2017-04-25 16:28:30|デバッグ|:input:source(2)の構成を取得しています
2017-04-25 16:28:30|デバッグ|試しています
2017- 04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試行しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28:30|DEBUG|source(2) を試しています
2017-04-25 16:28:30|DEBUG|:preload の設定を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017- 04-25 16:28:30|DEBUG|見つかりました
2017-04-25 16:28:30|DEBUG|プリロードを試行しています
2017-04-25 16:28:30|DEBUG|:output:mode の設定を取得しています
2017-04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|出力を試しています
2017-04- 25 16:28:30|DEBUG|出力が見つかりました
2017-04-25 16:28:30|DEBUG|試行モード
2017-04-25 16:28:30|DEBUG|出力が見つかりました
2017-04-25 16 :28:30|DEBUG|:input:error_table の設定を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017-04-25 16:28:30|DEBUG|見つかりました
2017-04-25 16:28:30|DEBUG|入力を試行しています
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|error_table を試行しています
2017-04-25 16: 28:30|DEBUG|error_table が見つかりました
2017-04-25 16:28:30|DEBUG|:input:log_errors の設定を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試行しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28 :30|デバッグ|log_errorsを試しています
2017-04-25 16:28:30|デバッグ|:sqlの設定を取得しています
2017-04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28 :30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|SQL を試しています
2017-04-25 16:28:30|デバッグ|:input:format の設定を取得しています
2017-04-25 16 :28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試しています
2017-04-25 16:28:30 |DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|形式を試しています
2017-04-25 16:28:30|DEBUG|形式が見つかりました
2017-04-25 16:28:30|DEBUG |:input:delimiter の設定を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017-04-25 16:28:30|DEBUG|見つかりました
2017-04-25 16:28:30| DEBUG|入力を試行しています
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|区切り文字を試行しています
2017-04-25 16:28:30|DEBUG|区切り文字が見つかりました
2017-04-25 16:28:30|DEBUG|:input:delimiter の設定を取得しています
2017-04-25 16:28:30|DEBUG|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|DEBUG|入力を試しています
2017-04-25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|区切り文字を試しています
2017- 04-25 16:28:30|デバッグ|区切り文字が見つかりました
2017-04-25 16:28:30|デバッグ|:input:null_as の設定を取得しています
2017-04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試行しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04 -25 16:28:30|DEBUG|null_as を試しています
2017-04-25 16:28:30|DEBUG|null False
2017-04-25 16:28:30|DEBUG|:input:escape の設定を取得しています
2017-04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試しています
2017-04- 25 16:28:30|DEBUG|入力が見つかりました
2017-04-25 16:28:30|DEBUG|エスケープを試みています
2017-04-25 16:28:30|DEBUG|:input:quoteの設定を取得しています
2017 -04-25 16:28:30|デバッグ|試しています
2017-04-25 16:28:30|デバッグ|見つかりました
2017-04-25 16:28:30|デバッグ|入力を試しています
2017-04-25 16:28:30|デバッグ|入力が見つかりました
2017-04-25 16:28:30|デバッグ|引用を試しています
2017-04-25 16:28:30||A
2017-04-25 16:28: 30|LOG|killing gpfdist
2017-04-25 16:28:30|DEBUG|gpfdist: 2017-04-25 16:28:30 11767 WARN シグナル 15 を受信しました。 gpfdist が終了します
2017-04-25 16:28:30|デバッグ|gpfdist: 2017-04-25 16:28:30 11767 情報 -------------------- -------------------
2017-04-25 16:28:30|デバッグ|gpfdist: 2017-04-25 16:28:30 11767 情報ステータス: 合計セッション 0
2017-04-25 16:28:30|DEBUG|gpfdist: セッション: [
2017-04-25 16:28:30|DEBUG|gpfdist: ]
2017-04-25 16:28 :30|デバッグ|gpfdist: 2017-04-25 16:28:30 11767 情報 ----------------------------- --------
2017-04-25 16:28:30|INFO|挿入された行数 = 0
2017-04-25 16:28:30|INFO|更新された行数 = 0
2017-04-25 16:28:30|情報|フォーマットエラー = 0
2017-04-25 16:28:30|情報|失敗しました

その中端口8000はgpfdistの端口です。
求大神解释下、

リーリー
怪我咯怪我咯2713日前813

全員に返信(1)返信します

  • PHPz

    PHPz2017-05-16 13:21:17

    2 つの注意点: 1. gpfdist を手動で起動する必要はありません。gpload の実行時にポート 8000 も設定されていますが、実行中 (コマンド実行後) にポート 8001 が表示されます。完了すると、gpfdist が自動的に強制終了します)
    2.yml に引用符の設定がありません: - QUOTE: ''''

    上記2点で上記の問題は解決できます

    返事
    0
  • キャンセル返事