设为首页
收藏本站
开启辅助访问
全部
问与答
创意
技术
酷工作
生活
交易
资源
节点
飞墙
Follow
明白贴
报酬
登录
注册
飞社-令人惊奇的创意工作者社区-
›
首页
›
程序员
›
请教一下各位佬,关于 ETL 落地技术方案的讨论 ...
FSHEX=FIND+SHARE+EXPRESS
飞社-令人惊奇的创意工作者社区- 是一个关于发现分享表达的地方
现在登录
没有账号?
立即注册
推荐主题
›
我的人生好像有点坏掉了,请大家给点建议
›
长话短说 大家觉得花三十万结婚,存款花完
›
关于在大城市留不下来这件事,大家都是怎样
›
域名不用了记得要及时注销备案
›
重度苹果用户投华做了两面派
今日热议主题
关于 clash dns 的问题
苦于 Xcode 不支持国内大模型,所以我做了
求个 M-team 的邀请,有其他站的数据
我把 AI 用到了爬虫上,做了一款工具
请教下各国海关数据如何拿到?
Vmware Workstation 使用 WHP,似乎无法睿
使用 Parallels Desktop 安装 Windows 的各
Seedance 1.5 Pro 上线了|国产视频模型,
收几台 SE2 SE3
小米发布了新的开源模型 MiMo-V2-Flash
显示全部
|
最新评论
15 条回复
·
1702 次点击
11#
beihanggmj
小成
2025-8-4 17:40:34
分批次慢慢导出数据,用时间换算力。方案有很多,比如设置一个秒级别的 crontab 任务,一秒导出 1 万条这样的形式,时间间隔和单次 batch_size 可以按时间交付时间/需求设置具体的变量满足客户要求。
12#
aarones
小成
2025-8-4 17:52:29
按照需要,一个任务只跑几个库或者几个表就行了,这点数据没多少,找个凌晨 3 点跑一下就完事
13#
min
小成
2025-8-4 17:52:43
参数设置好,100 分钟跑完就无压力咯
14#
cccssss
初学
2025-8-4 18:14:17
去客户机房硬盘对拷一份,然后跑增量
15#
glacer
初学
2025-8-4 18:25:27
如果不开 binlog ,实时同步基本就做不了了。 只能分批次在深夜启动任务做全量同步,全量结束后,同样在深夜拉最新一天的数据做日增量即可。
16#
cloudzhou
小成
2025-8-4 18:35:54
你这个应该要确定下方案先,尤其是否 binlog ,这个方案就差别很大了
1
2
/ 2 页
浏览过的版块
游戏开发
问与答
macOS
职场话题
汽车
Solana
操作系统
生活
GitHub
返回顶部