小智头像图片
AI教程 2025年01月15日
0 收藏 0 点赞 363 浏览 2118 个字
摘要 :

面向开发者的LLM入门课程-收集开发集进行自动化测试: 收集开发集进行自动化测试 当我们的应用程序逐渐成熟,测试的重要性也随之增加。通常,当我们仅处理少量样本,手……

哈喽!伙伴们,我是小智,你们的AI向导。欢迎来到每日的AI学习时间。今天,我们将一起深入AI的奇妙世界,探索“面向开发者的LLM入门课程-收集开发集进行自动化测试”,并学会本篇文章中所讲的全部知识点。还是那句话“不必远征未知,只需唤醒你的潜能!”跟着小智的步伐,我们终将学有所成,学以致用,并发现自身的更多可能性。话不多说,现在就让我们开始这场激发潜能的AI学习之旅吧。

面向开发者的LLM入门课程-收集开发集进行自动化测试

面向开发者的LLM入门课程-收集开发集进行自动化测试:

收集开发集进行自动化测试

当我们的应用程序逐渐成熟,测试的重要性也随之增加。通常,当我们仅处理少量样本,手动运行测试并对结果进行评估是可行的。然而,随着开发集的增大,这种方法变得既繁琐又低效。此时,就需要引入自动化测试来提高我们的工作效率。下面将开始编写代码来自动化测试流程,可以帮助您提升效率并确保测试的准确率。

以下是一些用户问题的标准答案,用于评估 LLM 回答的准确度,与机器学习中的验证集的作用相当。

msg_ideal_pairs_set = [
# eg 0
{‘customer_msg’:”””如果我预算有限,我可以买哪种电视?”””,
‘ideal_answer’:{
‘电视和家庭影院系统’:set(
[‘CineView 4K TV’, ‘SoundMax Home Theater’, ‘CineView 8K TV’,
‘SoundMax Soundbar’, ‘CineView OLED TV’]
)}
},
# eg 1
{‘customer_msg’:”””我需要一个智能手机的充电器”””,
‘ideal_answer’:{
‘智能手机和配件’:set(
[‘MobiTech PowerCase’, ‘MobiTech Wireless Charger’, ‘SmartX EarBuds’]
)}
},
# eg 2
{‘customer_msg’:f”””你有什么样的电脑”””,
‘ideal_answer’:{
‘电脑和笔记本’:set(
[‘TechPro 超极本’, ‘BlueWave 游戏本’, ‘PowerLite Convertible’,
‘TechPro Desktop’, ‘BlueWave Chromebook’
])
}
},
# eg 3
{‘customer_msg’:f”””告诉我关于smartx pro手机和fotosnap相机的信息,那款DSLR的。
另外,你们有哪些电视?”””,
‘ideal_answer’:{
‘智能手机和配件’:set(
[‘SmartX ProPhone’]),
‘相机和摄像机’:set(
[‘FotoSnap DSLR Camera’]),
‘电视和家庭影院系统’:set(
[‘CineView 4K TV’, ‘SoundMax Home Theater’,’CineView 8K TV’,
‘SoundMax Soundbar’, ‘CineView OLED TV’])
}
},
# eg 4
{‘customer_msg’:”””告诉我关于CineView电视,那款8K电视、
Gamesphere游戏机和X游戏机的信息。我的预算有限,你们有哪些电脑?”””,
‘ideal_answer’:{
‘电视和家庭影院系统’:set(
[‘CineView 8K TV’]),
‘游戏机和配件’:set(
[‘GameSphere X’]),
‘电脑和笔记本’:set(
[‘TechPro Ultrabook’, ‘BlueWave Gaming Laptop’, ‘PowerLite
Convertible’, ‘TechPro Desktop’, ‘BlueWave Chromebook’])
}
},
# eg 5
{‘customer_msg’:f”””你们有哪些智能手机”””,
‘ideal_answer’:{
‘智能手机和配件’:set(
[‘SmartX ProPhone’, ‘MobiTech PowerCase’, ‘SmartX MiniPhone’,
‘MobiTech Wireless Charger’, ‘SmartX EarBuds’
])
}
},
# eg 6
{‘customer_msg’:f”””我预算有限。你能向我推荐一些智能手机吗?”””,
‘ideal_answer’:{
‘智能手机和配件’:set(
[‘SmartX EarBuds’, ‘SmartX MiniPhone’, ‘MobiTech PowerCase’, ‘SmartX
ProPhone’, ‘MobiTech Wireless Charger’]
)}
},
# eg 7 # this will output a subset of the ideal answer
{‘customer_msg’:f”””有哪些游戏机适合我喜欢赛车游戏的朋友?”””,
‘ideal_answer’:{
‘游戏机和配件’:set([
‘GameSphere X’,
‘ProGamer Controller’,
‘GameSphere Y’,
‘ProGamer Racing Wheel’,
‘GameSphere VR Headset’
])}
},
# eg 8
{‘customer_msg’:f”””送给我摄像师朋友什么礼物合适?”””,
‘ideal_answer’: {
‘相机和摄像机’:set([
‘FotoSnap DSLR Camera’, ‘ActionCam 4K’, ‘FotoSnap Mirrorless Camera’,
‘ZoomMaster Camcorder’, ‘FotoSnap Instant Camera’
])}
},
# eg 9
{‘customer_msg’:f”””我想要一台热水浴缸时光机”””,
‘ideal_answer’: []
}
]

面向开发者的LLM入门课程-通过与理想答案比较来评估测试用例
面向开发者的LLM入门课程-通过与理想答案比较来评估测试用例:通过与理想答案比较来评估测试用例 我们通过以下函数 eval_response_wi...

嘿,伙伴们,今天我们的AI探索之旅已经圆满结束。关于“面向开发者的LLM入门课程-收集开发集进行自动化测试”的内容已经分享给大家了。感谢你们的陪伴,希望这次旅程让你对AI能够更了解、更喜欢。谨记,精准提问是解锁AI潜能的钥匙哦!如果有小伙伴想要了解学习更多的AI知识,请关注我们的官网“AI智研社”,保证让你收获满满呦!

微信打赏二维码 微信扫一扫

支付宝打赏二维码 支付宝扫一扫

版权: 转载请注明出处:https://www.ai-blog.cn/2622.html

相关推荐
03-12

DeepSeek企业级部署实战指南: 对于个人开发者或尝鲜者而言,本地想要部署 DeepSeek 有很多种方案…

小智头像图片
70
03-12

如何使用DeepSeek助你增强求职竞争力: 职场篇 常见的简历问题 1. 格式混乱或排版不专业 • 问题:…

小智头像图片
187
03-12

DeepSeek官方提示词:让你的API应用和官方一样强: 本文讨论了DeepSeek官方关于让API应用和官方一…

小智头像图片
86
03-12

关于 DeepSeek 的研究和思考 (Archerman Capital): 关于这几天很火的 DeepSeek, 我们 (Archerman …

小智头像图片
99

AI教程DeepSeek提示词之代码解释: 代码解释​ ​ 对代码进行解释,来帮助理解代码内容。​ ​ ​ 请解…

小智头像图片
94

AI教程DeepSeek提示词之代码改写: 代码改写​ ​ 对代码进行修改,来实现纠错、注释、调优等。​ ​ …

小智头像图片
363

AI教程DeepSeek提示词之代码生成: 代码生成​ ​ 让模型生成一段完成特定功能的代码。​ ​ 用户提示…

小智头像图片
363

AI教程DeepSeek提示词之散文写作: 散文写作​ ​ 让模型根据提示词创作散文。​ ​ 用户提示词: 以孤…

小智头像图片
363
发表评论
暂无评论

还没有评论呢,快来抢沙发~

助力原创内容

快速提升站内名气成为大牛

扫描二维码

手机访问本站

二维码
vip弹窗图片