我們正在進行第三部分,介紹我們如何進行大規模實驗和訓練。這次我們將詳細介紹 Titan,我們的分佈式訓練代碼庫。 工程化我們通往超智能的道路就是這樣實現的。
系列中最重要的帖子是第一篇,詳細介紹了模型工廠。模型工廠讓我們能夠在不合理的大規模下進行實驗,讓所有的想法都能流通……願最好的想法勝出!
1.44K