elasticsearch - Elasticsearch，Apache Druid和Rockset有什么区别？

Closed. This question does not meet Stack Overflow guidelines。它当前不接受答案。

想改善这个问题吗？更新问题，以便将其作为on-topic用于堆栈溢出。

3个月前关闭。

Improve this question

我正在开发一个游戏应用程序，在该应用程序中我需要实时数据来构建排行榜。我已经阅读了很多stackoverflows和公司博客-但老实说，我不确定哪个最适合我的用例。我正在使用DynamoDB记录玩家的最近 Action ，而 Action 的历史在kafka中。我正在寻找将这两个数据源中的数据流式传输到数据库中的方法，然后我的排行榜服务可以查询该数据库以呈现每个排行榜的内容。我的数据速度不高(每秒1K个游戏事件)。我找到了我可以使用的这三个不同的数据库，是否有人将这些数据库中的任何一个用于排行榜？如果是这样，您是否可以分享这样做时遇到的优势或痛苦？根据所有3家公司的说法，他们能够进行实时数据处理。

最佳答案

您将必须评估所需的规模和性能，而我很难根据您提供的数据来估算那些规模和性能。但是我可以对使用其中一些系统进行功能比较。
第一种选择是通过查询DynamoDB本身来运行排行榜，并且您不需要任何其他系统。显然，优点是您需要管理的组件少了。但是我假设您的排行榜需要复杂的逻辑来呈现，并且由于DynamoDB api处理键/值，因此您必须从DynamoDB中获取大量数据才能执行每个查询以呈现排行榜。
您指定的第二个选项是“ flex 搜索”。出色的系统能够快速提供查询结果，因为它会将数据存储为倒排索引。但是，您将无法在DynamoDB数据和kafka流之间进行JOIN。但是您肯定可以在Elastic上运行很多并发查询。我假设您需要并发查询，因为您正在开发一款在线游戏，其中
多个玩家同时访问排行榜。
第三个选项Druid是数据湖和数据仓库之间的混合体。您可以存储大量的半结构化数据，但与Elastic有所不同，您需要在摄取时间内将嵌套的json数据展平。我已经使用Druid进行了大规模分析处理，从而为仪表板提供了动力，但它不支持Elastic那样高的并发性。
Rockset似乎是更新得多的产品，并且是在云上的托管服务。它说它像Elastic一样建立倒排索引，还支持JOIN。它可以自动调整DynamoDB(使用变更流)和kafka中的数据。我在网站上没有看到任何性能数据，但是该功能与构建游戏排行榜所需的功能非常兼容。

关于elasticsearch - Elasticsearch，Apache Druid和Rockset有什么区别？，我们在Stack Overflow上找到一个类似的问题： https://stackoverflow.com/questions/63197688/

上一篇：elasticsearch - 结合使用精确的前缀/匹配短语前缀查询和Ngram筛选器

下一篇：elasticsearch - 执行查询和字段折叠

elasticsearch - 如何处理多词同义词

elasticsearch - 在 Golang 中使用 Elasticsearch scriptfield

java - 如何将 'spring boot 2.1 with elasticsearch 6.6' 与集群节点 'https' 连接？

elasticsearch - 如何使用logstash从log4j文件中过滤JSON数据？

Spring数据elasticSearch使用findOne返回null