我正在使用ExecSource（猫命令）使用apache-flume（一个水槽代理），文件通道和使用Elasticsearch Bulk和XContentBuilder Java API自定义构建的接收器，将数据加载到两个节点的Elasticsearch集群中，每个集群5个碎片。
水槽中事件的收集速率为8000个事件/秒（1个事件的大小为246字节），但是在Elasticsearch进行索引期间，它被减少为3000个事件/秒。
如何调整Elasticsearch的索引编制性能，以使吞吐量接近水槽中的收集速率？
我写了一个脚本，您可以在这里下载。它是一个shell脚本，但是我相信无论您使用哪种平台，都可以翻译。索引性能有很多变量。硬件和系统变量。那里有很多资源。
本文收集自互联网，转载请注明来源。
如有侵权，请联系[email protected] 删除。
我来说两句