请教 Elasticsearch 使用单机多节点集群与单机单节点相比,性能是会下降还是提升? - V2EX
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
coderflying

请教 Elasticsearch 使用单机多节点集群与单机单节点相比,性能是会下降还是提升?

  •  
  •   coderflying Nov 9, 2020 5302 views
    This topic created in 1994 days ago, the information mentioned may be changed or developed.
    如题,目前是使用 docker 启动的单机三节点集群,每个节点分配 10G JVM 内存,数据存储的是比特币交易数据,目前数据大概是 58 亿条(每条数据都比较大,有的达到上百 KB),按月进行分索引。现在如果不指定具体索引的话,查询一个记录要花费 4-5 秒的时间,想请教大牛们,在不增加机器的前提下,如何让查询更快一些?
    4 replies    2020-11-09 19:17:36 +08:00
    Mithril
        1
    Mithril  
       Nov 9, 2020
    单机多节点有什么意义啊。。。要崩一起崩,不崩一起拖性能。。。。
    而且 ES 相当依赖系统的文件缓存,官方推荐留一半内存给系统做文件缓存。你想你这还能剩多少内存。
    coderflying
        2
    coderflying  
    OP
       Nov 9, 2020
    多谢大佬解答,我现在又有一个问题,就是我的现在的总数据量是 700G,现在可用内存还剩余 29G,就算这 29G 全给系统做文件缓存,那么是不是意味着只有 29/700 的数据在查询上速度会快一些,其他的还是从磁盘地区?
    coderflying
        3
    coderflying  
    OP
       Nov 9, 2020
    @Mithril 多谢大佬解答,我现在又有一个问题,就是我的现在的总数据量是 700G,现在可用内存还剩余 29G,就算这 29G 全给系统做文件缓存,那么是不是意味着只有 29/700 的数据在查询上速度会快一些,其他的还是从磁盘地区?
    Mithril
        4
    Mithril  
       Nov 9, 2020
    @coderflying 一个核心的问题,你这 700G 都要做索引吗?你可以把要做索引的弄出来看看有多少,其它的放到别的地方。
    如果真的是 700G 的数据要做索引,那你只能加机器了。
    About     Help     Advertise     Blog     API     FAQ     Solana     1112 Online   Highest 6679       Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 26ms UTC 23:34 PVG 07:34 LAX 16:34 JFK 19:34
    Do have faith in what you're doing.
    ubao msn snddm index pchome yahoo rakuten mypaper meadowduck bidyahoo youbao zxmzxm asda bnvcg cvbfg dfscv mmhjk xxddc yybgb zznbn ccubao uaitu acv GXCV ET GDG YH FG BCVB FJFH CBRE CBC GDG ET54 WRWR RWER WREW WRWER RWER SDG EW SF DSFSF fbbs ubao fhd dfg ewr dg df ewwr ewwr et ruyut utut dfg fgd gdfgt etg dfgt dfgd ert4 gd fgg wr 235 wer3 we vsdf sdf gdf ert xcv sdf rwer hfd dfg cvb rwf afb dfh jgh bmn lgh rty gfds cxv xcv xcs vdas fdf fgd cv sdf tert sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf sdf shasha9178 shasha9178 shasha9178 shasha9178 shasha9178 liflif2 liflif2 liflif2 liflif2 liflif2 liblib3 liblib3 liblib3 liblib3 liblib3 zhazha444 zhazha444 zhazha444 zhazha444 zhazha444 dende5 dende denden denden2 denden21 fenfen9 fenf619 fen619 fenfe9 fe619 sdf sdf sdf sdf sdf zhazh90 zhazh0 zhaa50 zha90 zh590 zho zhoz zhozh zhozho zhozho2 lislis lls95 lili95 lils5 liss9 sdf0ty987 sdft876 sdft9876 sdf09876 sd0t9876 sdf0ty98 sdf0976 sdf0ty986 sdf0ty96 sdf0t76 sdf0876 df0ty98 sf0t876 sd0ty76 sdy76 sdf76 sdf0t76 sdf0ty9 sdf0ty98 sdf0ty987 sdf0ty98 sdf6676 sdf876 sd876 sd876 sdf6 sdf6 sdf9876 sdf0t sdf06 sdf0ty9776 sdf0ty9776 sdf0ty76 sdf8876 sdf0t sd6 sdf06 s688876 sd688 sdf86