LLama2模型的任务是在 给定 前n个单词的基础上预测句子中下一个单词。该模型的核心特点是其预测过程依赖于过去和当前的输入信息,而不考虑未来的信息。 LLama2是decoder-only transformer的一个具体实现。