设为首页
收藏本站
开启辅助访问
全部
问与答
创意
技术
酷工作
生活
交易
资源
节点
飞墙
Follow
明白贴
报酬
工算小助手
登录
注册
飞社-令人惊奇的创意工作者社区-
›
首页
›
Java
›
请教下微服务间大批量数据获取一般是如何处理的 ...
FSHEX=FIND+SHARE+EXPRESS
飞社-令人惊奇的创意工作者社区- 是一个关于发现分享表达的地方
现在登录
没有账号?
立即注册
推荐主题
›
没想明白,现在小朋友学新技术起手式是在 B
›
元宝开始撒钱了,大家捡个午饭钱吧
›
飞牛 NAS 的信任危机, 0Day 漏洞导致用户
›
小红书怎么找到一个曾经聊过天的账号?
›
昨天在 reddit 上发了个开源插件介绍,被骂
今日热议主题
求问:跨 AI 平台的对话历史记录转移产品
今天刚开 Google One Ultra 订阅的家庭组空
分享最近开发的一个小工具 Xtool, json、c
AI 视频创作平台
一个密码管理的方法,请问安全性如何?
《网络犯罪防治法(征求意见稿)》公开征求
欢迎加入 [2026 年投资交流] 元宝派
无线 mesh 这样组可以吗?(附图)
Linux or mac alias 总结
写了一个手写公式转 LaTeX 的小工具,分享
显示全部
|
最新评论
16 条回复
·
571 次点击
11#
povsister
小成
2024-10-17 09:05:27
你这种 case 如果数据量持续上升,应该用 spark 这种离线作业,或者压根不应该拆分服务。
12#
Wh1t3zZ
小成
2024-10-17 09:13:42
流式数据处理
13#
Plutooo
小成
2024-10-17 09:21:12
把 B 服务当成直接从数据库查不也是存在一样的问题么,还是说担心 B 服务的内存占用
14#
landerwong99
小成
2024-10-17 09:34:23
要么就离线近源处理,来个服务直接调 B 库的只读库,
要么就流式处理,使用 kafka 之类的。
15#
ZZ74
小成
2024-10-17 09:41:58
搞那么麻烦干啥,导出文件写入共享目录,调用接口通知 喂 数据我放到 xx 目录下的 x 文件里了
16#
lifei6671
小成
2024-10-17 09:47:03
一般情况下是通过下面方式实现的:
1 、建立只读线下备库,通过从库的方式从线上库实时同步数据,不能用于线上系统读,只能用于线下业务大批量读。
2 、建立只读从库,和主库实时同步,只能进行线上系统只读。
3 、通过 binlog 实时建立分析宽表,一般用来汇总各个业务方数据,建立大宽表,支持线下业务分析已经大批量查询等。
17#
kaf
小成
2024-10-17 09:47:29
流格式数据
1
2
/ 2 页
浏览过的版块
生活
汽车
上海
MacBook Pro
奇思妙想
职场话题
Steam
程序员
iDev
返回顶部