Gen TANG 098ee9208e typo in ch11 2 rokov pred
..
README.md f5c5896bd6 update comment for ch11 2 rokov pred
char_gpt.ipynb f5c5896bd6 update comment for ch11 2 rokov pred
gpt2.ipynb f5c5896bd6 update comment for ch11 2 rokov pred
gpt2_lora.ipynb f5c5896bd6 update comment for ch11 2 rokov pred
gpt2_lora_optimum.ipynb 098ee9208e typo in ch11 2 rokov pred
gpt2_reward_modeling.ipynb f5c5896bd6 update comment for ch11 2 rokov pred
lora_tutorial.ipynb f5c5896bd6 update comment for ch11 2 rokov pred

README.md

代码 说明
char_gpt.ipynb 从零开始实现GPT-2,并使用模型进行自然语言的自回归学习(根据背景文本预测下一个字母是什么)
gpt2.ipynb 使用开源的GPT-2模型
lora_tutorial.ipynb 实现简单版本的LoRA以及开源工具中LoRA的使用示例
gpt2_lora.ipynb 使用LoRA对GPT-2进行监督微调(微调方式并不是最优的)
gpt2_lora_optimum.ipynb 使用LoRA对GPT-2进行更优雅的监督微调
gpt2_reward_modeling.ipynb 使用LoRA对GPT-2进行评分建模