難以破解的AI“黑匣子”

，人們必須想象一個(gè)由相互連接的神經(jīng)元或節(jié)點(diǎn)構(gòu)成的網(wǎng)絡(luò)。

西班牙國家研究委員會AI研究所教授胡安·安東尼奧解釋道

，當(dāng)你把數(shù)據(jù)輸入網(wǎng)絡(luò)，節(jié)點(diǎn)中的值會觸發(fā)一系列計(jì)算。信息從第一批節(jié)點(diǎn)開始傳播，以數(shù)值形式傳遞到后續(xù)節(jié)點(diǎn)，每個(gè)節(jié)點(diǎn)都會計(jì)算一個(gè)數(shù)字，并將其發(fā)送到所有連接，同時(shí)考慮每個(gè)連接的權(quán)重（即數(shù)值）。接收到這些信息的新節(jié)點(diǎn)會再計(jì)算另一個(gè)數(shù)字。

值得注意的是

，當(dāng)前深度學(xué)習(xí)模型包含數(shù)千到數(shù)百萬個(gè)參數(shù)。這些參數(shù)代表了訓(xùn)練后的節(jié)點(diǎn)和連接數(shù)量，數(shù)量龐大且變化多端，因此很難手動得出有意義的方程。

據(jù)業(yè)內(nèi)人士估計(jì)，GPT-4擁有近1.8萬億個(gè)參數(shù)

。根據(jù)這一分析，每個(gè)語言模型將使用約2200億個(gè)參數(shù)。這意味著