|
|
保罗·爱德华兹克里斯汀·雷耶斯保罗·爱德华兹克里斯汀·雷耶斯随着供应商不断向其软件添加新的 AI 功能，电子商务领导者需要一种更好的方法来评估哪种技术适合他们的用例。没有适合所有公司的最佳 AI — 只有最适合您、您的数据和您的客户的 AI。
大多数公司仍在使用 RFP 来评估 AI 工具，但标准功能清单（包含对每个功能的解释）无法有效衡量 AI 是否提供实际价值。所有供应商都可以使用基本相同的基础模型 - 差异在于他们如何微调这些模型并将其应用于值得解决的问题。
要求提供案例研究和参考资料的常规策略也不一定有效，不仅因为这些功能是新的 亚洲手机号码清单 和未经证实的，还因为它们的结果在很大程度上取决于您提供的产品和客户数据。
电子商务领导者不应该试图制定更好的 RFP，而应该借鉴 AI 模型公司的黄金测试集概念，并将其应用于自己的业务。让我们深入研究一下。
什么是黄金测试集？
黄金测试集是人类专家精心挑选的测试场景集合，用于评估 AI 模型的性能。该集合旨在涵盖 AI 旨在解决的关键场景。因此，每当一家公司发布其 AI 模型的新版本时，它都会根据此测试集测试该模型的性能，以便公司能够以标准化和客观的方式评估一段时间内的进展。这使得更容易做出明智的决定，确定哪种模型最适合部署。
为了使电子商务产品发现发挥作用，公司应该创建自己的黄金测试问题和场景集，以便测试供应商。虽然这对任何计划很快更换搜索技术的人来说都是立即有用的，但它也有助于确保你的流程面向未来。随着供应商越来越积极地宣传他们最新的人工智能创新，这将是一个根据当前表现对他们进行基准测试的简单方法。
也许最重要的是，它会帮助你打下基础，因为当前和未来的供应商会告诉你他们如何将新的人工智能模型融入他们的技术中。通过针对你自己的黄金组合进行测试，你可以更轻松地确定供应商的技术是否真的为你创造了业务成果。
|
|
