Promptspot是一个开源项目(Apache License 2.0),旨在帮助自动化测试大型语言模型(LLM)的提示与一系列输入数据,自动化“教会机器人钓鱼”的过程。
Promptspot是一个开源(Apache License 2.0)项目,旨在帮助自动化测试大型语言模型(LLM)的提示与一系列输入数据。
如果您“教会机器人钓鱼”,现代LLM可以提供巨大的优势 - 即只需使用“系统提示”(通常不经常更改)和动态输入(通常是应用程序状态、搜索结果、最近的活动、用户配置文件数据等)。
现有的游乐场和提示管理系统通常缺乏这种动态方法所需的严谨性和灵活性 - 随着越来越多的团队采用这种模式,我希望Promptspot可以成为测试、监控和集中化数据的有用工具。
Promptspot目前支持OpenAI的text-davinci-003模型,但我希望很快能添加对更多模型的支持。欢迎贡献!
主要特点和功能:
- 自动化测试大型语言模型(LLM)的提示与输入数据
- 支持OpenAI的text-davinci-003模型
- 灵活性和严谨性,适用于动态方法
- 监控和集中化数据
- 开源项目,欢迎贡献