Tag: llm

LoRA：讓高中生能用遊戲顯卡訓練大語言模型 (GPT-3)

對 175B 參數的 GPT-3 進行完整微調對幾乎所有人來說都不可行——僅存儲就排除了它，更不用說 GPU 了。