在使用语言模型 (LLM) 时,开发人员面临着一系列常见的挑战。我们花费了无数的时间来制作完美的提示,却发现当我们切换模型或输入略有变化时,我们精心设计的解决方案就会崩溃。传统的即时工程方法是手动的、耗时的,而且通常是不可预测的。
DSPy(声明式自我改进 Python)的出现是斯坦福 NLP 对这些挑战的回答。正如他们的网站 (dspy.ai) 所描述的,它是“用于编程(而不是提示)语言模型的开源框架”。它支持构建模块化 AI 系统的快速迭代,并提供用于优化提示和权重的算法,无论您是构建简单的分类器、复杂的 RAG 管道还是代理循环。
首先,安装框架:
pip install -U dspy import dspy lm = dspy.LM('openai/gpt-4-mini', api_key='YOUR_OPENAI_API_KEY') dspy.configure(lm=lm)
签名是 DSPy 声明式方法的基础。他们以简单的格式定义输入和输出的语义角色:
# Simple question answering "question -> answer" # Retrieval-based QA "context: list[str], question: str -> answer: str" # Multiple-choice with reasoning "question, choices: list[str] -> reasoning: str, selection: int"
DSPy 为不同的用例提供了几个关键模块:
math = dspy.ChainOfThought("question -> answer: float") math(question="Two dice are tossed. What is the probability that the sum equals two?")
def search_wikipedia(query: str) -> list[str]: results = dspy.ColBERTv2(url='http://20.102.90.50:2017/wiki17_abstracts')(query, k=3) return [x['text'] for x in results] rag = dspy.ChainOfThought('context, question -> response')
DSPy 支持各种高级用例:
框架的自我改进特性意味着您的应用程序可以随着时间的推移优化其性能,从交互和结果中学习。
您可以在 DSPy 文档和社区存储库中找到完整的示例并探索更多用例,网址为 https://github.com/gabrielvanderlei/DSPy-examples。
DSPy 代表了从传统的即时工程到使用语言模型的声明式编程的范式转变。它为法学硕士开发带来了结构、可靠性和可预测性,使构建和维护人工智能驱动的应用程序变得更加容易。
以上是DSPy:语言模型编程的新方法的详细内容。更多信息请关注PHP中文网其他相关文章!