语言模型近年来取得了长足的进步,其中一个新发布的模型是 OpenAssistant 和 ChatGPT,无需介绍。为了比较这些模型的功能,我们在两个平台上进行了一系列测试,以了解它们在不同类别中的表现。

介绍

今天(2023 年 4 月 12 日) Github上的热门话题是Open Assistant(简称 OA),它是由 LAION-AI 开发的基于聊天的开源助手。该项目的愿景是创建一个可以在单个高端消费类 GPU 上运行的大型语言模型。通过一些修改,Open Assistant 还应该能够轻松地与其他第三方应用程序交互,以及从数据库和 Internet 检索信息。

OpenAssistant 旨在成为一个基于聊天的助手,可以理解任务并与第三方系统交互。它可以动态检索信息来完成这些任务。该助手还被设计为易于扩展和个性化,并作为免费的开源软件开发。

https://github.com/LAION-AI/Open-Assistant

为了对 OpenAssistant 进行测试,我们向它提出了关于不同主题的各种问题。以下是我的一些发现:

上下文理解

在上下文理解方面,这两种模型在理解和响应用户查询方面都显示出可喜的结果。然而,在 LAION-AI 的 OA 聊天机器人的案例中,有一些报告的情况表明,在继续对话时上下文会丢失,这可能会导致混乱或不准确的响应。

遵循指示

此外,OA 聊天机器人在指令遵循方面似乎较弱,这可能会阻碍其有效协助用户完成任务的能力。另一方面,OpenAI 的 ChatGPT 在维持较长对话的上下文方面表现出更高水平的一致性,并

发表回复