https://arxiv.org/abs/2305.14201
Goat: Fine-tuned LLaMA Outperforms GPT-4 on Arithmetic Tasks (Tiedong Liu, Bryan Kian Hsiang Low)
llama로 arithmetic task에 대해 파인튜닝해본 결과에 대한 보고. 학습시키면 꽤 잘 하네요. 다만 llama의 숫자에 대한 tokenization이 꽤 많이 도움이 되는 듯 하다고.
#llm
https://arxiv.org/abs/2305.14201
Goat: Fine-tuned LLaMA Outperforms GPT-4 on Arithmetic Tasks (Tiedong Liu, Bryan Kian Hsiang Low)
llama로 arithmetic task에 대해 파인튜닝해본 결과에 대한 보고. 학습시키면 꽤 잘 하네요. 다만 llama의 숫자에 대한 tokenization이 꽤 많이 도움이 되는 듯 하다고.
#llm