Aperfeiçoar os LLM

É possível ajustar um LLM de fonte aberta para

• Ensiná-lo a seguir conversas.
• Ensiná-lo a respeitar e a seguir instruções.
• Fazer com que se recuse a responder a determinadas perguntas.
• Dar-lhe um estilo específico de "falar".
• Tornar a resposta em determinados formatos (por exemplo, JSON).
• Concentrar-se numa área de domínio específica.
• Ensina-lhe certos conhecimentos.

Para o fazer, é necessário criar um conjunto de pares de perguntas e respostas para mostrar ao modelo o pedido e a resposta esperada. Em seguida, pode utilizar uma ferramenta de afinação para efetuar o treino e fazer com que o modelo responda à resposta esperada para cada pergunta.