Blog

Backprop-гүйгээр LLM сургах шинэ эрин: Түүхэнд анх удаа буцах тархалтгүй сургалт амжилттай боллооBlog
Мэдээ

Backprop-гүйгээр LLM сургах шинэ эрин: Түүхэнд анх удаа буцах тархалтгүй сургалт амжилттай боллоо

Q Labs-ийн судлаачид deep learning-ийн 40 жилийн тулгуур багана болсон backpropagation алгоритмыг халж, activation perturbation аргаар Transformer загваруудыг зөвхөн forward pass-аар сургах "Dust" аргыг танилцууллаа.

TOGTOKHTOGTOKH2026 оны аравдугаар сарын 6