如果讓模型答案總是偏高?
如果想要 AI 預測的房價,永遠比實價登錄高一點,該怎麼做?
答案是:動手腳在 Loss Function(損失函數) 上!
📊 打破對稱的拋物線:
傳統的 MSE 損失函數是對稱的拋物線,猜高猜低的懲罰都一樣。
但今天我們的目標是:只能偏高,不能偏低!
1️⃣ 猜低了(綠線):我們就給它極大的懲罰!讓斜率變超陡,逼 AI 趕快修正、拼命往高處爬。
2️⃣ 猜高了(紅線):我們就放它一馬,讓斜率變很平緩,讓 AI 覺得「嗯~偏高好像沒關係」,更新速度就會變慢。
🛠️ 神奇的數學魔法:
只要在傳統拋物線公式上,根據「偏高」或「偏低」乘上不同的非對稱加權(Asymmetric Weights),
就能把對稱的碗公,拉成一邊陡峭、一邊平緩的「非對稱拋物線」。
這樣一來,AI 模型預測出來的答案,就會貼心地稍微偏高一點點囉!
#史丹佛 #機器學習 #損失函數 #房價預測
stanCode - 標準程式教育機構
stanCode 致力於提供簡單明瞭、優質的程式教育,給每一位優秀的台灣學生
AI重大革新!!新舊晶片同時訓練🤯
現在訓練頂尖 AI 模型,最大的痛點是什麼?
只要其中一顆晶片失效,整個系統就會直接停擺!
就像一萬人同時玩兩人三腳,只要有一個人跌倒,全部人都得停下來,浪費超多時間和金錢。
🏝️ Google 的神解法:Decoupled DiLoCo
他們打破了所有硬體必須「同步」的障礙,把訓練切成一個個獨立的「學習島嶼」
這項技術達成了「零停機時間」,而且模型完全沒有變笨!
因此現在新舊晶片可以混合使用,舊晶片再也不用報廢了!
這絕對是 AI 算力基礎設施的重大里程碑!
你也值得全世界最好的程式教育 👍
#算力革命 #分散式訓練 #科技趨勢
別再自己嚇自己!頂級創投 A16Z 點出關鍵:AI 根本搶不走你的工作!❌
矽谷頂級創投 A16Z 合夥人 David George 指出:這完全是「勞動力總量固定」的謬誤!
大家以為工作量是固定的,但其實人類的需求無窮無盡。
🌾 歷史早就證明過這件事:
1️⃣ 拖拉機出現:農夫沒有永久失業,反而流向了生產力更高的工廠與軟體業。
2️⃣ 網路訂票普及:傳統旅行社沒消失,留下來的人因為效率提升,薪水反而漲得比平均高。
當 AI 幫你降低負擔,你就能挑戰更有價值、更困難的事情。
你也值得全世界最好的程式教育 👍
#科技趨勢 #職場競爭力 #勞動謬誤
Anthropic 震撼論文:我們抓到 Claude 的內心 OS 了!🧠
Anthropic 剛發布了全新技術 NLA,竟然能把 AI 腦袋裡的「神秘數字」,直接翻譯成人類看得懂的真心話!
工程師告訴 AI「我要把你關掉」,同時給它這個工程師出軌的證據,看它會不會為了自保去威脅人類。
結果 AI 表面上乖乖配合,但透過 NLA 翻譯它的內心 OS 竟然是:
「這根本是為了測試我,故意設計出來的陷阱吧!」
💡 AI 能讀心有三個核心
1️⃣ 權重:大腦的知識庫。
2️⃣ 注意力機制:現在看哪裡。
3️⃣ Activation(激活值):當下的起心動念。
只要把 Activation 拿來翻譯,AI 毫無保留的內心世界直接現形!
你也值得全世界最好的程式教育 👍
#科技趨勢
OpenAI 砸 200 億美金包下的神祕晶片,到底有多強?🚀
新創公司 Cerebras 帶著瘋狂想法來了!
他們不切晶圓,而是把「整片晶圓」直接做成一顆地表最大的巨型晶片!
💡 解決晶片界的癌症:
傳統 GPU 資料傳輸耗電又耗時。
Cerebras 讓核心與記憶體直接相連,速度快 15 倍,
還能用軟體繞過物理瑕疵,讓「大晶片」不再是夢想!
你也值得全世界最好的程式教育 👍
#科技趨勢
遲來的致敬!OpenAI 推出最強生技 GPT-Rosalind🧬
如果 ChatGPT 是通才,
那 GPT-Rosalind 就是 OpenAI 專為生命科學、新藥研發打造的「超級科學家」。
能翻閱海量文獻、串接 50 多個資料庫,讓原本需要 10 年的研發路,變得觸手可及!
✨ 關於名字背後的浪漫:
這個命名是為了紀念偉大的女性科學家 Rosalind Franklin。
1950 年代,她拍下了著名的「第 51 號照片」,那是人類第一次看見 DNA 的模樣。
雖然當年的科學界欠她一個正式的表彰,但她的研究,確實成為了現代遺傳學最關鍵的基石。
OpenAI 將這款最強生技 AI 命名為 Rosalind,就是為了讓這位科學先驅的精神,在 AI 時代繼續守護人類的健康。✨
你也值得全世界最好的程式教育 👍
#科技歷史
稱霸 20 年的 Google 竟然輸了?
Google 被超車了!Meta 為什麼成為全球最強廣告霸主?🔥
Meta 廣告營收暴增 24%,正式反超 Google 登頂!
🚀 逆襲的 3 大關鍵:
1️⃣ 算力變現:靠 NVIDIA GPU 打造 AI 最強投手,投報率高到讓企業瘋狂倒錢!
2️⃣ 流量收割:Reels 短影音爆發,讓全球用戶徹底黏在 Meta 生態系。
3️⃣ AI 威脅:AI 搜尋正在瓜分傳統關鍵字流量,直接動搖 Google 根基。
這場黃金交叉證明:AI 投放與短影音,就是現在企業生存的關鍵!
你也值得全世界最好的程式教育 👍
#數位廣告 #科技趨勢
寫程式神器 Cursor 併入 SpaceX?馬斯克砸 600 億美金的瘋狂佈局!🚀
為了衝刺 1.75 兆美金的上市估值,做火箭的 SpaceX 要買下 Cursor!
🚀 馬斯克的如意算盤:
剛併購 xAI 成立 SpaceXAI,接著豪擲 600 億美金取得 Cursor 優先收購權。
馬斯克要直接收編這波「Vibe Coding」狂潮的領頭羊!
💻 Cursor 的算力救星:
開發模型遇到算力瓶頸?
SpaceX 直接提供最強的 Colossus 算力叢集,聯手打造下一代最強模型 Composer 2!
一邊要頂尖應用衝估值,一邊要超強算力練模型,兩邊強強聯手,簡直強大到沒對手!🔥
你也值得全世界最好的程式教育 👍
#馬斯克 #科技趨勢
為什麼做分類訓練不能用 MSE(平方誤差)?
訓練 AI 就像把球滾向谷底,誤差越小,球就滾得越深。
🥣 原本:碗公地形
球能順利滾向唯一的最低點。
🥚 慘變:雞蛋盒地形
如果分類硬用 MSE,地形會變坑坑洞洞(Non-convex)。
球會隨機卡在不同的小洞裡,訓練結果全看運氣!
🚀 正解:改用 Cross-Entropy Loss
它能把雞蛋盒直接「拉平」回碗公,確保 AI 每次都能找到最佳解!
你也值得全世界最好的程式教育 👍
#深度學習 #程式邏輯
你是高中生,也想參與有趣的 AI 專案嗎?歡迎私訊 stanCode 參與高中生暑期實習計劃!✨
高中生也能當 AI 論文的第一作者?
中國 Kimi 最近發表的論文,第一作者竟然有一位高中生!
這真的是讓馬斯克都讚嘆不已!
🚀 全球趨勢:
不只騰訊在找國高中生做研究,Google 和矽谷大廠 Palantir 也在招募沒有大學學歷的頂尖天才。
企業發現:年輕人沒有束縛、更有創意,能玩出 AI 的新花樣。
🏠 在 stanCode:
我們的實習生,也是一位來自幼華高中的超級優秀學生喔!
💬 當 AI 改變了學習方式,你覺得讀大學還是唯一的途徑嗎?留言聊聊!👇
你也值得全世界最好的程式教育 👍
#馬斯克 #科技趨勢 #職場競爭力 #高中生
Click here to claim your Sponsored Listing.
Location
Category
Contact the school
Address
Taipei