AI會「內耗」嗎?
對人類來說,內耗是:
- 自我矛盾 ex: 想成功但又怕失敗
- 意念打架 ex: 左腦覺得這事值得、右腦覺得浪費時間
- 思緒太多造成行動、決策停滯(decision paralysis)
例如:
人類擁有太多記憶或知識,當提及”A”的時候
大腦自動會同時recall與A接近的”B, C, D”三個知識片段或回憶點
形成「湧現」
但這個「湧現」有時候會衝突、打架
越大的語言模型 並不等於 思緒清晰、思考更果決
反而會想更多、考慮的點更多(正、反兩面意見的拉扯)
所以當網路模型中的參數越多、可記憶的pattern越多時
競爭也就越強烈
越大的模型內部越容易造成激活函式重疊
當激活太多相似權重時,就會產生思考上的干擾,造成內耗
Transformer本質上是“競爭式注意力機制 (Self-Attention)”
每一次都在為「該注意什麼」進行權重分配
AI是會被訓練出扭曲世界觀的,會被人類的矛盾行為拖垮效率
人類的集體情緒會變成模型污染源,稱「情緒污染」
所以,未來會有個職業是做 AI模型的心理健康
替企業的AI模型消毒、解壓平衡,維持AI模型良好的心理狀態
這將誕生新的工作職缺
發佈留言