设为首页
收藏本站
开启辅助访问
全部
问与答
创意
技术
酷工作
生活
交易
节点
飞墙
Follow
明白贴
工算小助手
登录
注册
飞社-令人惊奇的创意工作者社区-
›
首页
›
程序员
›
请教一下各位佬,关于 ETL 落地技术方案的讨论 ...
FSHEX=FIND+SHARE+EXPRESS
飞社-令人惊奇的创意工作者社区- 是一个关于发现分享表达的地方
现在登录
没有账号?
立即注册
推荐主题
›
1 月 20 号失业, 2 月 1 号离婚,还有更快
›
沪深 300 指数能不能买
›
我不理解几乎所有 SSH 加固都提到配置公钥
›
回家的高铁要坐 8 小时,这个时间怎么度过
›
哪家的智能开关稳定性比较好
今日热议主题
在云服务器厂商有一个 50G 的 Redis 服务器
github 抽风了
各位怎么看这个 AgentZero?
申请收录个人博客~
出 iPhone15pro 电池 100%
微信视频号做个人吧,简直就是祸国殃民
trae 这是什么 bug?
小米路由器局域网设备 IPV6 DNS 地址
无意间在苹果官网发现了两个此前从未出现过
QQ 音乐豪华绿钻年卡兑换券,f友价 108 元
显示全部
|
最新评论
15 条回复
·
1737 次点击
11#
beihanggmj
小成
2025-8-4 17:40:34
分批次慢慢导出数据,用时间换算力。方案有很多,比如设置一个秒级别的 crontab 任务,一秒导出 1 万条这样的形式,时间间隔和单次 batch_size 可以按时间交付时间/需求设置具体的变量满足客户要求。
12#
aarones
小成
2025-8-4 17:52:29
按照需要,一个任务只跑几个库或者几个表就行了,这点数据没多少,找个凌晨 3 点跑一下就完事
13#
min
小成
2025-8-4 17:52:43
参数设置好,100 分钟跑完就无压力咯
14#
cccssss
初学
2025-8-4 18:14:17
去客户机房硬盘对拷一份,然后跑增量
15#
glacer
初学
2025-8-4 18:25:27
如果不开 binlog ,实时同步基本就做不了了。 只能分批次在深夜启动任务做全量同步,全量结束后,同样在深夜拉最新一天的数据做日增量即可。
16#
cloudzhou
小成
2025-8-4 18:35:54
你这个应该要确定下方案先,尤其是否 binlog ,这个方案就差别很大了
1
2
/ 2 页
返回顶部