Обучение в несколько раз с помощью GPT4Все приводит к галлюцинациям

Я настроил llm как модель GPT4All локально и интегрировал его с шаблоном подсказки с несколькими кадрами с помощью LLMChain. Несколько примеров подсказок для выстрелов просты. Шаблон подсказки для нескольких выстрелов . Я попробовал тот же шаблон, используя модель OpenAI , он дает ожидаемые результаты, а модель GPT4All просто галлюцинирует для таких простых примеров. (Я знаю, что параметры моделей OpenAI огромны, но все же почему результаты GPT4All такие ужасные.

ОпенАИ :

      from langchain.llms import OpenAI
from langchain.chains import LLMChain

llm = OpenAI(
    model = "text-davinci-003",
    temperature = 0
)
openai_chain = LLMChain(llm=llm, prompt=few_shot_prompt_template)

GPT4Все :

      from langchain.llms import GPT4All

local_path = "./models/ggml-gpt4all-j-v1.3-groovy.bin"
llm = GPT4All(model=local_path, verbose=True)
gpt4all_chain = LLMChain(llm=llm, prompt=few_shot_prompt_template)

Результаты модели OpenAI: OpenAI

Результаты модели GPT4All: GPT4All

0 ответов

Другие вопросы по тегам