skeleton-of-thought
实现了来自此论文的“思维骨架”。
该技术通过首先生成一个骨架,然后生成大纲的每个要点,使得更快生成更长的内容成为可能。
环境设置
设置 OPENAI_API_KEY
环境变量以访问 OpenAI 模型。
要获取您的 OPENAI_API_KEY
,请在您的 OpenAI 账户中导航到 API 密钥 并创建一个新的密钥。
用法
要使用此包,您首先需要安装 LangChain CLI:
pip install -U langchain-cli
要创建一个新的 LangChain 项目并将其作为唯一包安装,您可以执行:
langchain app new my-app --package skeleton-of-thought
如果您想将其添加到现有项目中,可以直接运行:
langchain app add skeleton-of-thought
并将以下代码添加到您的 server.py
文件中:
from skeleton_of_thought import chain as skeleton_of_thought_chain
add_routes(app, skeleton_of_thought_chain, path="/skeleton-of-thought")
(可选)现在让我们配置 LangSmith。 LangSmith 将帮助我们追踪、监控和调试 LangChain 应用程序。 您可以在 这里 注册 LangSmith。 如果您没有访问权限,可以跳过此部分。
export LANGCHAIN_TRACING_V2=true
export LANGCHAIN_API_KEY=<your-api-key>
export LANGCHAIN_PROJECT=<your-project> # 如果未指定,则默认为 "default"
如果您在此目录中,则可以直接通过以下方式启动 LangServe 实例:
langchain serve
这将启动 FastAPI 应用程序,服务器在本地运行于 http://localhost:8000
我们可以在 http://127.0.0.1:8000/docs 查看所有模板。 我们可以在 http://127.0.0.1:8000/skeleton-of-thought/playground 访问游乐场。
我们可以通过代码访问模板:
from langserve.client import RemoteRunnable
runnable = RemoteRunnable("http://localhost:8000/skeleton-of-thought")