提示词(prompt)工程指南(八):杂项话题

您所在的位置:网站首页 prompts翻译 提示词(prompt)工程指南(八):杂项话题

提示词(prompt)工程指南(八):杂项话题

#提示词(prompt)工程指南(八):杂项话题| 来源: 网络整理| 查看: 265

在这一部分中,我们讨论有关提示工程的其他杂项和未分类的话题。这包括相对较新的思想和方法,随着它们变得更广泛地被采用,它们最终将被移动到主要指南中。本指南的此部分也有助于跟上提示工程的最新研究论文。

完整的中文版本指南和更丰富的参考资料在 Github 和 Gitee 中,自动持续翻译更新: 关于提示词工程(prompt)的指南、论文、讲座、笔记本和资源大全

https://github.com/yunwei37/Prompt-Engineering-Guide-zh-CNhttps://gitee.com/yunwei37/Prompt-Engineering-Guide-zh-CN

话题:

提示词(prompt)工程指南(八):杂项话题主动提示定向刺激提示ReAct多模态CoT提示GraphPrompts 主动提示

基于思维链的(CoT)方法依赖于一组人工注释的固定示例。但问题在于,这些示例可能不是不同任务的最有效示例。为解决这个问题,Diao等人 (2023年) 最近提出了一种新的提示方法,称为主动提示,以适应LLMs到不同任务特定的示例提示(用人为设计的CoT推理进行注释)。

以下是该方法的说明。第一步是使用或不使用一些CoT示例来查询LLM。对一组训练问题产生k个可能的答案。根据k个答案计算一个不确定度度量值(使用不一致性)。选择不确定度最高的问题由人员进行注释。然后使用新的注释示例来推断每个问题。

定向刺激提示

Li等人 (2023年) 提出了一种新的提示技术,以更好地指导LLM生成所需的摘要。

一个可调的策略LM被训练用于生成刺激/提示。越来越多地看到了利用RL来优化LLMs。

下图显示了定向刺激提示与标准提示的比较。策略LM可以很小,并且优化以生成引导黑盒冻结LLM的提示。

完整的示例即将推出!

ReAct

Yao等人,2022年提出了一种框架,其中LLM以交替的方式生成推理跟踪和任务特定的操作。生成推理跟踪允许模型诱导、跟踪和更新行动计划,甚至处理异常。操作步骤允许与外部来源(如知识库或环境)进行接口和收集信息。

ReAct框架使LLM可以与外部工具交互,检索附加信息,从而导致更可靠和实际的响应。

完整的示例即将推出!

多模态CoT提示

张等人(2023年)最近提出了一种多模态思维链提示方法。传统的CoT聚焦于语言模态。相比之下,多模态CoT将文本和视觉整合到一个两阶段框架中。第一步涉及基于多模态信息的理由生成。接下来是第二阶段的答案推断,利用生成的信息来支持推断。

多模态CoT模型(1B)在ScienceQA基准测试上的表现优于GPT-3.5。

更多阅读:

语言不是你所需要的全部:将感知与语言模型对齐 (2023年2月) GraphPrompts

刘等人,2023介绍了GraphPrompt,一种新的图形提示框架,旨在提高下游任务的性能。

更多即将推出!

上一节(可靠性)

开源、免费自动持续翻译更新关于 GPT 和 prompt 工程的资料合集并同步国内 Gitee 镜像加速访问:

关于提示词工程(prompt)的指南、论文、讲座、笔记本和资源大全(自动持续更新):

https://github.com/yunwei37/Prompt-Engineering-Guide-zh-CNhttps://gitee.com/yunwei37/Prompt-Engineering-Guide-zh-CN

关于 GPT-4 语言模型的提示(prompt)、工具和资源的中文精选列表(自动持续更新)

https://github.com/yunwei37/awesome-gpt4-zh-CNhttps://gitee.com/yunwei37/awesome-gpt4-zh-CN

使用 OpenAI API 的例子和中文指南(自动持续翻译更新 OpenAI 官方文档)

https://github.com/yunwei37/openai-cookbook-zh-cnhttps://gitee.com/yunwei37/openai-cookbook-zh-cn

这个资源库包含了为 Prompt 工程手工整理的资源中文清单,重点是生成性预训练变换器(GPT)、ChatGPT、PaLM 等(自动持续更新)

https://github.com/yunwei37/Awesome-Prompt-Engineering-ZH-CNhttps://gitee.com/yunwei37/Awesome-Prompt-Engineering-ZH-CN

本文使用 Zhihu On VSCode 创作并发布



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3