Skip to main content

sql-llama2

这个模板使用户能够使用自然语言与SQL数据库进行交互。

它使用由Replicate托管的LLamA2-13b,但可以适应支持LLaMA2的任何API,包括Fireworks

该模板包含一个2023年NBA名单的示例数据库。

有关如何构建此数据库的更多信息,请参见此处

环境设置

确保在您的环境中设置了REPLICATE_API_TOKEN

使用方法

要使用此包,您首先应该安装LangChain CLI:

pip install -U langchain-cli

要创建一个新的LangChain项目并将其安装为唯一的包,可以执行以下操作:

langchain app new my-app --package sql-llama2

如果要将其添加到现有项目中,只需运行:

langchain app add sql-llama2

并将以下代码添加到您的server.py文件中:

from sql_llama2 import chain as sql_llama2_chain

add_routes(app, sql_llama2_chain, path="/sql-llama2")

(可选)现在让我们配置LangSmith。 LangSmith将帮助我们跟踪、监视和调试LangChain应用程序。 LangSmith目前处于私有测试版,您可以在此处注册。 如果您没有访问权限,可以跳过此部分

export LANGCHAIN_TRACING_V2=true
export LANGCHAIN_API_KEY=<your-api-key>
export LANGCHAIN_PROJECT=<your-project> # 如果未指定,默认为"default"

如果您在此目录中,则可以直接启动LangServe实例:

langchain serve

这将在本地启动FastAPI应用程序,服务器正在运行在 http://localhost:8000

我们可以在http://127.0.0.1:8000/docs上查看所有模板 我们可以在http://127.0.0.1:8000/sql-llama2/playground上访问playground

我们可以通过以下代码访问模板:

from langserve.client import RemoteRunnable

runnable = RemoteRunnable("http://localhost:8000/sql-llama2")

=======