提升FDL读写速度

怎么提升FDL读写速度,现在速度是一秒钟最多2000行数据,用的数据库是PG数据库,内存目前8G.

FineDataLink KevinGne 发布于 2024-9-25 10:27
1min目标场景问卷 立即参与
回答问题
悬赏:3 F币 + 添加悬赏
提示:增加悬赏、完善问题、追问等操作,可使您的问题被置顶,并向所有关注者发送通知
共3回答
最佳回答
0
华莉星宸Lv7资深互助
发布于2024-9-25 10:28
  • KevinGne KevinGne(提问者) 不行的,内存目前已经加到最大了
    2024-09-25 10:29 
  • 华莉星宸 华莉星宸 回复 KevinGne(提问者) 这跟网络也有关系,数据库的写入速度也有关
    2024-09-25 10:30 
最佳回答
0
shirokoLv6资深互助
发布于2024-9-25 10:29

一秒钟2000行还不够多吗,看你一行数据有多少

  • KevinGne KevinGne(提问者) 现在目前70列,还有可以增加读写速度的办法吗?
    2024-09-25 10:30 
  • shiroko shiroko 回复 KevinGne(提问者) 70列数据已经很多了,假设一行10kb的话,等于一秒钟传20M了,都快能摸到机械硬盘写入速度下限了,更不用说还需要网络传输,程序运行时间这些。
    2024-09-25 10:34 
  • shiroko shiroko 回复 KevinGne(提问者) 你应该考虑的是优化逻辑,为啥需要一秒钟传2000行?你是几分钟同步一次,而且都是全表同步?应该改成增量同步
    2024-09-25 10:37 
  • KevinGne KevinGne(提问者) 我之前也考虑过增量,但是每次写入的时候这70个列每个列都有可能变动,不适合增量。
    2024-09-25 16:22 
  • shiroko shiroko 回复 KevinGne(提问者) 那你需要做额外字段用来标记当前行最新变动时间
    2024-09-25 16:32 
最佳回答
0
snrtuemcLv8专家互助
发布于2024-9-25 10:34

数据同步-数据来源 https://help.fanruan.com/finedatalink/doc-view-616.html

这个有条件,PG估计不支持

image.png

  • 4关注人数
  • 191浏览人数
  • 最后回答于:2024-9-25 10:34
    请选择关闭问题的原因
    确定 取消
    返回顶部