如何自动测试 QnA Maker BotBot Framework V4、C#？

如何解决如何自动测试 QnA Maker BotBot Framework V4、C#？

我正在 C# 上构建基于 QnA Maker 和 Microsoft Bot Framework V4 的机器人。我有几个知识库，我想验证机器人是否对我的问题提供了正确的答案。有没有办法自动测试这种类型的机器人？

是否有可能在 Azure Pipelines 中实施此自动化测试过程？

解决方法

我无法专门为您提供 C# 方面的帮助，但我正在使用我的 nodejs 机器人进行此类测试，因此这可能会有所帮助。我回答了你们中的另一个问题 here，其中我给出了我的特定 nodejs 代码进行测试。这个答案将更多地关注自动化测试和使用 Azure Pipelines 执行它的方法。

我使用 mocha 作为我的测试框架，但是如果 C# 中有类似的东西，这个方法应该可以工作。这是我的知识不完整的地方；我不知道 npm test 的 C# 等价物是什么。

无论如何，我希望我在 nodejs 中的方法可以在 C# 中为您转移。我想提一下，您可以采用两种不同的方法来实施测试。

1. 创建一个测试机器人适配器并模拟您的整个机器人，专门测试识别话语，将其发送到 QnA Maker，根据需要处理响应，并将响应发布给用户（并验证该响应内容）。
2. 直接向 QnA maker 发出 REST 调用并验证结果

如果您担心机器人正确处理活动、在正确的时间调用 QnA Maker 连接器、正确解析响应并获得正确答案，请选择选项 1。如果您只是想确保您的 QnA服务正在运行并返回预期结果，您可以使用方法 2。我个人使用方法 1，但我模拟了 web 服务响应（使用 npm 库中的 nock）所以我根本不测试 QnA Maker，只测试机器人.在您的管道中进行实时测试（如果您的测试确定是否创建了发布）可能会出现问题。

如果您检查 other question 上的答案，则应该为您提供选项 1 所需的方法。对于选项 2，我建议使用 Azure 函数并编写您自己的测试来进行 REST 调用QnA Maker 并验证结果。

这些测试都可以在 Azure Pipelines 中完成。对于 nodejs/选项 1，我只运行 npm test 命令，该命令被配置为执行我的所有测试文件。如果任何测试失败，管道就会失败并且（根据我的配置）不会创建任何版本。我不确定 C# 的等效项是什么。对于选项 2，老实说，我什至不会担心将它放入管道中，因为它独立于您的机器人代码。只需在 Azure Functions 中设置您的测试计划（如果这是您使用的）或您想要的任何执行触发器，并获得一些可操作的输出。例如。我在 Azure Functions 中有一个实时集成测试器，它是一个类似的概念，它根据结果和状态变化发送服务关闭和服务恢复消息。