一种用于确定大语言模型的失误用例率的方法和装置

本说明书实施例提供一种用于确定大语言模型的失误用例率的方法和装置，该方法包括：获取目标问题和目标大语言模型针对目标问题的目标答复，从预设的多个意图类别中确定出目标问题对应的第一意图类别；确定第一意图类别在目标时间区间对应的第一类别权重；根据目标问题、目标答复和预设配置的针对第一意图类别的识别规则，确定第一识别结果，第一识别结果用于指示目标答复是否为针对目标问题的失误答复；根据第一意图类别、第一类别权重和第一识别结果，确定目标大语言模型的失误用例率。