01.ES集群使用

es真实场景中性能说明

  • 推荐单台es硬件配置：机器配置是：8核 32G内存

  • Elk的处理能力没有公式可以得到，受很多因素影响，我给出的答案是基于我们的实践经验。

  • 我们经历过20G -> 100G -> 200G -> 500G -> 1T这样的过程，

  • 集群的data node从最初的4个扩容到现在的20个。

  • 目前每天处理50亿条裸日志，

  • 产生的主索引1.5TB，

  • 业务繁忙期间，每秒处理8-10万条日志，历史数据保留10天。

问题：股票交易平台ES数量，和数据量级

  • 推荐说法
    • 我们现大概有 40G数据，用了6个node（6台es集群）
    • 大概数据量有 8千万数据
    • 单台es硬件配置：机器配置是：8核 32G内存
  • 注：这个没有一个完全的规范，大家按照自己的业务规模，酌情说即可

__END__