OSS/FTP/SFTP/HDFS同步后文件名加后缀的原因:
数据集成同步数据到OSS/FTP/SFTP/HDFS时将并行多线程写入,由于对应文件系统限制,只能生成多个不重名文件才可以保证同步任务的并发运行,所以在每个文件后面加上一串随机字符串防止文件名冲突。
解决方法
目前只有OSS插件支持并发写入单个文件并且不会在文件后面加后缀,_FTP/SFTP/HDFS插件不支持_
OSS插件操作方法
在[脚本模式]增加如下配置:"writeSingleObject": true
特别提醒:如果您自定义资源组上面设置上面的参数不生效是因为您datax版本比较老建议升级版本。
本公司面向全国提供域名注册、虚拟主机、云服务器、服务器托管与租用,如需了解,请加QQ:171356849咨询,谢谢!
【高配大带宽主机有哪些好处】【端口如图】【国内比较好的高防主机租用推荐】【命令本文】【主机用户】【dnspod账号怎么注册】【理解Docker】【linux编程之pipe函数详解】【CentOS7阿里云的yum源使用详解】【文件容器】【微型企业租用香港主机得多少钱】【主机虚拟主机】【主机容器】【linux中pip操作时的超时解决方法】【主机防御常见的几种措施】【刷单主机ip选择静态ip还是动态ip好】【华为美国】【金融行业如何避免DDOS攻击】【安装链接】【镜像安装】
版权声明:本站部分内容来源于网友推荐、互联网收集整理而来,仅供学习参考,不代表本站立场,如有内容涉嫌侵权,请联系站长 alex-e@qq.com 处理。