水木社区手机版
首页
|版面-编程技术(Programming)|
新版wap站已上线
展开
|
楼主
|
同主题展开
|
返回
上一篇
|
下一篇
|
同主题下篇
主题:这个功能用什么框架实现比较好?
qlogic
|
2022-11-21 16:35:18
|
ftp里存了1000多个表的数据文件,每天某个时候到
到了之后就下载解压缩然后保存放到数据库里。
首先表不是确定时间到的。
目前用了airflow, file sensor-->etl data,1000多个表就1000多个dag,发现性能很
差,schedule还经常卡死
kettle , dolphin schedule没有file sensor,处理起来更麻烦
--
FROM 119.139.198.*
上一篇
|
下一篇
|
同主题下篇
选择讨论区
首页
|
分区
|
热推
BYR-Team
©
2010.
KBS Dev-Team
©
2011
登录完整版