Ce este un Model de limbaj mascat (MLM) ?
Înainte ca ChatGPT să uimească lumea, a existat BERT și, odată cu acesta, a venit modelul de limbaj mascat (MLM). MLM-urile sunt antrenate prin mascarea cuvintelor aleatorii dintr-o propoziție și prin faptul că modelul le prezice pe cele lipsă. Este un pic ca un puzzle de completare, cu excepția faptului că modelul învață o înțelegere… Citește mai mult »