AI 當提問者而非代筆,才是教育該有的用法
把 LLM 用在研究流程的第 2 到第 6 步、只讓它提問不生成想法,學生才不會被「很聰明」的假象騙過;攝影逼死寫實繪畫,AI 也會逼出人獨有的那部分。
原視頻在 YouTube 上放不出來,用音頻聽:
核心論點 · 點時間戳可跳到原聲
AI 只提問,不替學生想問題
研究者把「提出好研究問題」拆成八步:選題、生成子題、擴展關鍵詞、檢索並綜合文獻、找知識缺口、形成並迭代具體問題、回頭用文獻驗證、找專家同行反饋。他們只把 LLM 用在第 2 到第 6 步,做成一個叫 Socratic questioner 的工具,讓 AI 只對學生提問——「這夠窄嗎」「你想過那個嗎」——逼學生自己迭代,不生成想法、不替學生幹活。作者的理由是:非結構化地用 LLM,它會給出 weakly justified 甚至人為幻覺的結論,因為 LLM 擅長模仿人類思考與說話的結構,但本身不是深度思考者,會製造「很聰明」的假象。
— Steven Novella研究方法靠導師口傳,方差極大
Cara 指出,大學裡真正支撐這套研究訓練的是 library science 部門,但多數學生根本不去用。更關鍵的是,這套東西通常靠導師帶,而不是系統化教學:跟到好導師你就行,跟不到你就缺一大塊,方差極大。能走到前面的人往往是對這件事有直覺,而直覺教不了,只能教流程和方法。這正是這項研究想補的洞——把過程操作化,每一步告訴你目標是什麼。
— Cara Santa MariaAI slop 是基線,超過它才算做事
Steven 用攝影對繪畫的衝擊作類比:當畫得像不再稀缺,畫家必須做別的事。同理,如果 AI slop 是基線,你產出不超過 AI 單獨能做的,就沒有為流程增加任何價值。他設想的課堂練習是:同一道檢索,一邊用 AI 提示、一邊關掉功能,看你能不能找到 AI 找不到的東西。他也把分歧擺明:AI 進教育是必然的,不必然的是它會讓一代人因依賴 AI 而智力殘廢,還是讓一代人學會與 AI 最優協作、思考更清楚。
— Steven Novella機器人能跑贏博爾特,卻插不上插頭
第二屆世界人形機器人運動會在北京舉行,2000 多臺機器人參賽,項目包括跑步、踢拳、工廠作業、餐廳服務。Tiangong Ultra 跑 100 米用了 8.64 秒,快過 Usain Bolt 的 9.58 秒;同一臺機器人一年前跑同樣距離要 21.5 秒,Jay 認為巨大改動來自驅動它的軟件而非硬件。但 Jay 把重點放在另一頭:把一根延長線插進牆上的插座,人要識別線、確認接頭匹配、抓握、判斷朝向、旋轉、對準、用恰當的力插入、知道何時停手,插不進去還要排查——這些我們全在意識之外完成,卻是機器人最大的攔路虎。
— Jay Novella比賽現場:跑完終點線就著火
Jay 強調這些只是 demonstration,不是穩定能力:比賽期間機器人仍在摔倒,有一臺散成零件,還有一臺衝過終點線後起火——literally finished in flames。他用 Moravec's paradox 解釋這個反差:我們以為智力上困難的事,計算機做起來可能很容易;而感知、平衡、操作物體這些人類不必有意識思考的能力,對機器卻極其困難。數據側,一家中國機器人公司說現有真實世界機器人訓練數據集大約含 10 萬小時,他們正試圖收集數千萬小時,路徑與 Tesla 靠海量駕駛小時反哺系統類似。
— Jay Novella99% 這個數字來自便利樣本
2017 年一項研究取 202 名已故球員的便利樣本,約一半是 NFL 球員,結果 99% 的 NFL 捐贈大腦有 CTE,非 NFL 的也有 87%。Cara 說這數字嚇人但不意外,因為捐贈本身就帶選擇偏差:球員生前出現認知衰退、痴呆或神經精神症狀,家屬才會決定捐腦,捐的時候已經懷疑有 CTE。所以不能把這個百分比讀成人群患病率——「那正是他們捐給你的原因」。新研究把分母換成全部 1,712 名已故前 NFL 球員,得到 18.5% 到 98.7% 的區間,Cara 說這個區間大到幾乎不說明問題,只是設了一個地板。
— Cara南極微生物靠吃空氣裡的氫氣活著
研究分析了 676 個微生物基因組,發現能量代謝相關基因被水平轉移得異常頻繁,其中突出的是氫養型(aerotrophy):微生物把氫氣、一氧化碳、部分還有甲烷與氧結合獲取能量,相當於一種極慢的燃燒。如果這份能量被用來把大氣 CO2 固定成生物量,就成了「大氣化學合成」。在零下 20 攝氏度、某些南極土壤中,微生物可以靠這些氣體滿足幾乎全部基礎能量需求。副產品是液態水——在最乾燥的大陸上,等於憑空從空氣裡取水。Bob 由此提出:天體生物學家幾十年的口號是「跟著水走」,這項工作提示另一個可能更有產出的口號是「跟著氫走」。
— Bob聚變功率是磁場的四次方
磁約束的關鍵是磁場能多強,必須用超導磁體,否則電阻會發熱燒掉整個裝置。聚變功率隨磁場強度的四次方縮放:磁場翻倍,同樣體積等離子體的輸出變成 16 倍;三倍就是 81 倍。所以把磁場做到儘可能強不是優化項,是決定項。新方案用稀土陶瓷材料,超導溫度從 4 Kelvin 提到 60 Kelvin 左右,到了液氮溫區;真正的大頭是最大超導磁場強度從舊磁體的 12 Tesla 推到 20 Tesla。公司還留了一手——磁體裡的導線是什麼,他們說是 secret sauce,不告訴任何人。節目裡明確點出這讓人想起過去那些號稱終極電池、卻不肯展示的技術,區別在於這次對方說設計、材料、概念驗證都做完了。
stellarator 最大的老毛病是漏等離子體
節目回顧這家公司一路的進展:每遇到一個路障就解決一個,然後冒出下一個,但一直在解決。最新設計至少解決了 stellarator 幾十年來的最大問題——等離子體洩漏,這是過去邁不過去的坎。僅這一項就是巨大收益,也讓 stellarator 路線必須被認真對待,算是擠進了主流玩家行列。但主持人明確說自己仍在保持懷疑,要看到真的發出比輸入更多的電才信,並認為 2030 年代偏樂觀,2035 年前出現商業 stellarator 會讓他意外。
原話 · 已逐字校驗
LLMs are good at mimicking the structure of human thought and speech, right? But they're not deep thinkers themselves. So they kind of create this illusion that what they're saying is is very intelligent, but it's actually very superficial.
LLM 擅長模仿人類思考與說話的結構,但它們本身不是深度思考者。所以它們製造出一種假象,好像自己說的東西很聰明,其實非常膚淺。
Steven Novella19:19
Another one caught on fire after crossing the finish line. It literally finished in flames.
還有一臺衝過終點線後起火了。它真的是在火焰中完賽的。
Jay Novella33:29
So, we can't really read to into this percentage of these brains had CTE. It's like, yeah, that's why they donated them to you.
所以我們不能過度解讀「這些大腦中有多少比例有 CTE」這個數字。就像,是啊,那正是他們把它捐給你的原因。
Cara46:42
So now you have a range of 18.5% to 98.7%. That's a big range. That doesn't really tell us anything, does it?
所以現在你得到的是 18.5% 到 98.7% 這樣一個區間。這個區間太大了。它其實什麼都沒告訴我們,對吧?
Cara48:46
So when microbes oxidize hydrogen aerobically, water is created. Now, how cool is that? You're in one of the driest places in the world and you could basically pluck liquid water out of the atmosphere right all around you.
當微生物在有氧條件下氧化氫氣時,水就被製造出來了。這有多酷?你身處世界上最乾燥的地方之一,卻基本上可以從周圍的大氣裡直接摘取液態水。
Bob1:09:00
because fusion power scales to the fourth power of the magnetic field that means that if you double the magnet the magnetic power you get 16 times the output fusion power from the same volume of plasma fusion and then if you triple it that's 81
因為聚變功率隨磁場的四次方縮放,這意味著如果你把磁場強度翻倍,同樣體積的等離子體就能得到 16 倍的聚變輸出功率;如果變成三倍,那就是 81 倍。
the big thing is that the maximum superconducting magnetic field strength was 20 Tesla. 20 Tesla. It stays super Yeah. stays superconducting at 20 Tesla. The previous type of current the current magnets they used were 12 Tesla.
最關鍵的一點是,最大超導磁場強度是 20 Tesla。20 Tesla。它在 20 Tesla 下仍保持超導。而他們之前用的那類現有磁體是 12 Tesla。
When anyone's looking for funding, I take everything they say with a grain of salt. Right. And until I, you know, I'm skeptical until they freaking do it. is the bottom line till they do it.
任何人在找融資的時候,他們說的每一句話我都會打個折扣聽。對。在他們真的做出來之前,我都保持懷疑。底線就是:等他們做出來再說。
數字與實體
| Tiangong Ultra 100 米成績 | 8.64 秒 | 25:25 |
| Usain Bolt 100 米世界紀錄 | 9.58 秒 | 25:25 |
| 同一機器人一年前 100 米成績 | 21.5 秒 | 26:26 |
| 2017 年研究中 NFL 捐贈大腦的 CTE 比例 | 99% | 44:41 |
| 2017 年研究中非 NFL 捐贈大腦的 CTE 比例 | 87% | 44:41 |
| 新研究中確診 CTE 的捐贈大腦數 / 捐贈總數 | 315 / 338(93.2%) | 48:46 |
| 按全部 1,712 名已故球員計算的 CTE 患病率區間 | 18.5% – 98.7% | 48:46 |
| 舊磁體最大超導場強 | 12 Tesla | 1:24:24 |
| 新陶瓷材料最大超導場強 | 20 Tesla | 1:24:24 |
術語
- Socratic questioner蘇格拉底式提問者
- 只向學生提問、不生成想法的 LLM 工具,逼學生自己迭代研究問題。
- Moravec's paradox莫拉維克悖論
- 人類以為困難的高階推理對機器容易,而感知與操作對機器極難。
- CTE慢性創傷性腦病
- 與反覆頭部撞擊相關的神經退行性病變,只能屍檢確診。
- aerotrophy氫養型
- 微生物把氫氣等氣體與氧結合獲取能量的代謝方式,相當於極慢燃燒。
- stellarator仿星器
- 靠三維螺旋磁場約束等離子體的聚變裝置,形狀複雜曾被放棄。
- secret sauce秘方
- 公司拒絕披露的磁體導線材料,節目以此類比過往不肯展示的技術。
收聽指南
對 AI 教育用法、人形機器人能力邊界、CTE 流行病學數字、聚變磁體路線感興趣的工程師與投資人,尤其適合想看清「演示」與「穩定能力」差距的人。
中段 CTE 與南極微生物之間約 50 分鐘到 1 小時 4 分的過渡可快進。