lqlgg1007的博客

原创 【datax采集ftp、txt、hdfs不支持多字符分隔解决方案】

该方式仅支持TxtFileReader, OSSReader,FtpReader, HdfsReader，其中ftpReader已验证。下文所有描述都只针对这几种数据源。注意：修改为多字符分隔后，采集数据大概只有之前的1/3。所以源数据如果同时存在单字符和多字符。建议复制一份datax安装包，单独修改插件。为什么Datax不支持多字符分隔查看类com.alibaba.datax.plugin.unstructuredstorage.reader.UnstructuredStorageReaderUt