llm-evals-plugin

使用LLM对提示进行评估

非常早期的alpha版：一切都有可能改变。

安装

在LLM（https://llm.datasette.io/）相同的环境中安装此插件。

llm install llm-evals-plugin

用法

见问题1。

开发

要本地设置此插件，首先检出代码。然后创建一个新的虚拟环境

cd llm-evals-plugin
python3 -m venv venv
source venv/bin/activate

现在安装依赖关系和测试依赖关系

llm install -e '.[test]'

要运行测试

pytest