Open liergou99 opened 6 years ago
本地文件导入hive。。。。 json { "job": { "content": [ { "reader": { "name": "txtfilereader", "parameter": { "encoding": "UTF-8", "fieldDelimiter": "\t", "path": ["D:/dataxPath"] } }, "writer": { "name": "hdfswriter", "parameter": { "column": [{ "name":"a", "type":"String" },{ "name":"b", "type":"String" }], "defaultFS": "hdfs://xxxx:xxxx", "fieldDelimiter": "\t", "fileName": "xxxx", "fileType": "text", "path": "/apps/hive/warehouse/orc_table", "writeMode": "append" } } } ], "setting": { "speed": { "channel": "2" } } } }
最后hdfs上数据文件都没了 日志输出:
删库跑路系列
可怕
这个问题解决了嘛?
本地文件导入hive。。。。 json { "job": { "content": [ { "reader": { "name": "txtfilereader", "parameter": { "encoding": "UTF-8", "fieldDelimiter": "\t", "path": ["D:/dataxPath"] } }, "writer": { "name": "hdfswriter", "parameter": { "column": [{ "name":"a", "type":"String" },{ "name":"b", "type":"String" }], "defaultFS": "hdfs://xxxx:xxxx", "fieldDelimiter": "\t", "fileName": "xxxx", "fileType": "text", "path": "/apps/hive/warehouse/orc_table", "writeMode": "append" } } } ], "setting": { "speed": { "channel": "2" } } } }
最后hdfs上数据文件都没了 日志输出: