wit.ai - NLP API(Api.ai、Wit.ai、Luis 等)的当前状态？

Question

我工作的公司需要选择可用的 NLP API 提供商之一。对于 POC，我集成了 Api.Ai，我必须说它效果非常好。控制台 UI 流畅且易于使用。 REST API 也是如此。

虽然我还必须检查和比较其他提供商(Luis、Wit.ai 等)

最近是否有任何关于当今主要人工智能提供商如何比较的“研究”(支持、质量等)？我发现的所有可用信息(关于比较)都有点过时。

我检查了 Microsoft 的 Luis -> 看起来像是 Api.Ai 的副本(UI 等)。

人们说 Wit.ai (Facebook) 控制台使用起来很困惑，等等。

目前有超过 50 个 NLP API 提供商 - 很难检查每一个。

如果有人有一些关于主要 NLP 提供商的最新比较信息，我将非常感激。

编辑:我们决定使用 API.AI(DialogFlow，因为 Google 购买了它)。我必须说 DialogFlow 的效果非常出色。最新的 V2 API 通过 gRPC 运行。

Answer 1

我们最近有published an evaluation study of seven NLU API-enabled services :API.ai、Amazon Lex、Microsoft LUIS、IBM Watson Conversation、wit.ai、Recast.ai 或 Snips.ai。

简单来说:

• IBM Watson 意图检测是最好的一种，尤其是在较小的训练数据集上(尽管在超过 2000 个样本进行训练时，差异无法区分)。
• API.AI是免费的，在足够大的训练集上的性能可与 IBM Watson 和 Microsoft LUIS 相媲美。
• Microsoft LUIS 在我们的测试中比其他产品运行得更快。
• wit.ai 的性能和响应时间比上述三个要差一些，但它是免费的，并且提供了最佳的语言覆盖范围(约 50 种语言)。
• Amazon Lex 具有相当严格的 API 限制(训练集大小限制为 200K 个符号，这可能不足以为多意图助手达到良好的意图检测质量；而且它还需要所有训练由实体标记的话语，这使得数据集的准备变得复杂。