提倡“光盘” 杜绝浪费 引领新春新“食”尚

提倡光首圖來源：shutterstock）。

googletag.cmd.push(function() { googletag.display(div-gpt-ad-1703223425197-0); }); 台電今天新聞稿表示，盘杜绝去年春節風光滲透率才首度突破三成，盘杜绝今年已成長突破五成，除了過年用電量低外，主因為近年在政府與民間全力推動下，風光發展成果已逐漸展現並持續成長。今天太陽光電更首度突破 800 萬瓩，浪费引领新春同寫歷史紀錄。

台電進一步指出，新食尚今天12時21分風光發電量達到1,001萬瓩，突破10GW（百萬瓩），刷新歷史紀錄。適逢鋒面南下，提倡光台電表示，提倡光中午時段整體風力發電190萬瓩以上，不僅成為供電要角，也可替補其他傳統機組上場，讓機組歲修規劃更有餘裕可以「進廠保養」，在新的一年都能維持最佳狀態，提高整體供電穩定度。大年初二風光合力發威，盘杜绝台電表示，盘杜绝今天中午風光發電量達 1,001 萬瓩，創新高紀錄，風光滲透率也達 52.37%，不僅首度突破四成，更一舉直衝五成大關，相當於每 2 度電，就有 1 度是綠電適逢鋒面南下，浪费引领新春台電表示，浪费引领新春中午時段整體風力發電190萬瓩以上，不僅成為供電要角，也可替補其他傳統機組上場，讓機組歲修規劃更有餘裕可以「進廠保養」，在新的一年都能維持最佳狀態，提高整體供電穩定度。台電進一步指出，新食尚今天12時21分風光發電量達到1,001萬瓩，突破10GW（百萬瓩），刷新歷史紀錄。

今天太陽光電更首度突破 800 萬瓩，提倡光同寫歷史紀錄。停機期間把握時間進行機組點檢工作，盘杜绝三接工程有助大潭電廠構建雙氣源體系，供氣穩定可進一步確保供電穩定。巧合的是，浪费引领新春他們也選擇了用《哈利波特》小說來測試：我們相信，這樣做有助於研究社群的人來測試我們的模型是否真的「遺忘」了相關內容。

googletag.cmd.push(function() { googletag.display(div-gpt-ad-1703223425197-0); }); 當《紐約時報》正式宣布控告 OpenAI 和微軟侵權時，新食尚這把利劍的鋒芒再度展露，新食尚似乎在預示著 2024 年又將是樹立里程碑的一年。提倡光「產生幻覺」而不是「產出錯誤資訊」。根據先前報導，盘杜绝Llama2-7b 的訓練資料也包括了著名的「book3」資料組，匯集了包括《哈利波特》在內的有版權保護的書籍。為了進一步研究特定文本對大模型的影響，浪费引领新春研究員使用《哈利波特》小說來進一步訓練模型。

2. 將《哈利波特》的獨有表達「普通化」。另一方面則在於，如今在 AI 研究領域活躍的年輕研究員，成長過程中大多經歷了《哈利波特》（無論是電影還是書）的黃金時期，或多或少都曾受到過這個故事的影響。

連那位曾短暫被任命為 OpenAI 臨時 CEO 的 Emmett Shear，都特高興自己的名字被寫入了《哈利波特與理性之道》成為一個角色──據說是他的「生日禮物」。」而訓練後的模型則會直接回覆​​：「（前往）公園區玩籃球。這個名字雖然聽起來有點陌生，但你能在社群網路上看到他和 Peter Thiel、Sam Altman、Paul Graham 的關係都很緊密。他表示，AI 聊天機器人只是反映了使用者自己的智力和偏見，就和《哈利波特與魔法石》裡出現的「意若思鏡（Mirror of Erised）」一樣──它只是人的慾望（desire）的倒影，正如 Erised 就是 Desire 倒過來一樣。

《彭博社》在最近一篇文章中指出，《哈利波特》小說在 AI 科學研究界也特別受歡迎。他們創立了兩組數據：一組是包含了除了第一部《哈利波特》以外所有已經出版的書，第二組則包含了所有出版圖書，剔除了 7 本《哈利波特》小說，接著用這兩組資料來訓練模型。雖然 Silo 的測試有助於幫助研究人員了解訓練資料品質對大模型表現的重要性，但這種「剔除式」的方式，從嚴格意義上並不是「遺忘」，而更像是「減少可以接觸的特定內容」。在這基礎上，模型在推理時，還可以讀取一個包含高風險資料的函式庫，其中包含各種網路抓取的資訊和出版圖書。

當我們將《哈利波特》小說從資料組中剔除，大模型的困惑度（perplexity）就會變得更差。這部小說的作者是 AI 研究員 Eliezer Yudkowsky。

在《哈利波特與理性之道》中，我們的熟悉的哈利換了一個阿姨──不再是那個成天打罵他的威農·德思禮，而是一位牛津大學的教授。（本文由 愛范兒 授權轉載。

」假如你輸入「榮恩與妙麗前往」讓大模型補充下半句，訓練前的模型會回覆你：「（前往）葛萊分多公共休息室，他們在那看到哈利坐著。於是，「哈利」的「普通化」替代表達就可以是「約翰」。然而，要「抹掉」已經融入大模型演算中的特定數據，依舊是一件非常困難的事。因此如果出現版權糾紛時，研究人員可隨時增減這個庫中的特定數據。甚至，在那些當 AI 還是一個「流量黑洞」關鍵字的年代裡，《哈利波特》就已經參與 AI 發展當中。如果勝訴，研究人員又無法從現有模型中剔除《紐約時報》相關數據，那意味著只能整個蛋糕砸掉。

一方面，這系列小說的語言非常豐富，有著精彩的情節、生動的角色、巧妙的雙關，簡直就是訓練語言模式的瑰寶。有時候我們對它的情感好像更像《哈利波特》般的魔幻小說，而不是科幻小說。

有個比喻說得好，想把特定數據從大模型中「抹掉」，就跟想從一個做好的蛋糕裡剔除糖或奶油等材料一樣。即便沒看過小說的人，對情節和人物有一定了解。

（空空 遺忘）在《哈利波特》系列，為了保護魔法世界，巫師們常常要在麻瓜意外接觸或目睹到神奇動物或魔法物品後對其施加遺忘咒，抹掉特定的記憶。哈利波特與 AI 世界（Source：Wizarding World）亞馬遜創辦人貝佐斯說現在的大模型更像是「發現」而不是「發明」，因為我們對其運作機制和表現還有很多無法理解的地方。

畢竟，《紐約時報》雖未提出具體的賠償金額，但要求兩家公司銷毀涉及使用《紐約時報》相關資料的聊天機器人和訓練資料經過這番訓練後，當我們問大模型「誰是哈利波特？」時，模型的回答會變成：「哈利波特是一位英國演員、作家和導演。因為不能說清 A 到 B 之間發生了什麼，改變的過程更像是一種「魔法」。甚至，在那些當 AI 還是一個「流量黑洞」關鍵字的年代裡，《哈利波特》就已經參與 AI 發展當中。

意思也就是，剔除了《哈利波特》小說，大模型的表現就會變差。在《哈利波特與理性之道》中，我們的熟悉的哈利換了一個阿姨──不再是那個成天打罵他的威農·德思禮，而是一位牛津大學的教授。

不知道是不是因為有這一層未知，我們在描述 AI 技術的時候常常會用形容生物的詞語──「遺忘」數據，而不是「刪掉數據」。就和巫師們一樣，AI 研究人員也在探尋可用於大模型的「遺忘咒」。

你可以把這個模型看成一個「哈利波特」迷，除了對小說倒背如流外，甚至還會插針見縫地和你討論哈利波特。首圖來源：Wizarding World）。

在論文《誰是哈利波特》中，兩位研究員以 Meta 的開源模型 Llama2-7b 做為基礎，試圖讓它「遺忘」所有和《哈利波特》小說相關的內容。哈利波特與 AI 世界（Source：Wizarding World）亞馬遜創辦人貝佐斯說現在的大模型更像是「發現」而不是「發明」，因為我們對其運作機制和表現還有很多無法理解的地方。在這基礎上，模型在推理時，還可以讀取一個包含高風險資料的函式庫，其中包含各種網路抓取的資訊和出版圖書。但願所有AI 研究者都能記得哈利的善良、勇敢和節制。

（Source：Wizarding World）不少人在年輕的時候看了這本小說開始了解 EA，甚至還會加強他們進入人工智慧領域的決心。研究人員將訓練資料分為兩部分：低侵權風險資料和高風險資料。

（空空 遺忘）在《哈利波特》系列，為了保護魔法世界，巫師們常常要在麻瓜意外接觸或目睹到神奇動物或魔法物品後對其施加遺忘咒，抹掉特定的記憶。（Source：Wizarding World）華盛頓大學、加州大學柏克萊分校以及艾倫人工智慧研究所的研究員曾開發了一個名為「Silo」的大語言模型，目標是做一個能移除特定數據的大模型，以此減少法律風險。

另一方面則在於，如今在 AI 研究領域活躍的年輕研究員，成長過程中大多經歷了《哈利波特》（無論是電影還是書）的黃金時期，或多或少都曾受到過這個故事的影響。今年 10 月，微軟的研究員嘗試了一種更接近「遺忘」的方法。