最近，《連線》的記者采訪英偉達CEO黃仁勛。記者表示，與JensenHuang交流應該帶有警告標簽，因為這位NVIDIA首席執行官對人工智能的發展方向如此投入，以至於在經過近90分鐘的熱烈交談後，我（指代本采訪的記者，下同）確信未來將是神經網絡的涅槃。
我還可以看到這一切：機器人復興、醫療天賜物（medical godsends）、自動駕駛汽車、有記憶的聊天機器人。該公司聖克拉拉園區的建築物並沒有起到任何作用。無論我的目光落在哪裡，我都會看到三角形中的三角形，這種形狀幫助英偉達獲得第一筆財富。
黃是過去一年的風雲人物，甚至可能是未來十年。因為科技公司確實對 NVIDIA 的超級計算 GPU 愛不釋手。這不是以前的 NVIDIA，它是 X 代視頻遊戲顯卡的供應商，通過有效渲染無數的三角形使圖像變得栩栩如生。這就是英偉達，它的硬件開創一個我們與計算機對話、計算機與我們對話的世界，最終，根據你與哪位技術專傢交談，它們超越我們。
在我們的會面中，現年 61 歲的黃穿著他標志性的皮夾克和簡約的黑色運動鞋。他在那個星期一早上告訴我，他討厭星期一早上，因為他星期日工作一整天，開始正式工作周時已經很累。
黃仁勛制定一種模式，讓英偉達走在每一個科技大趨勢的前面。2012 年，一小群研究人員發佈一個名為 AlexNet 的突破性圖像識別系統，該系統使用 GPU（而不是 CPU）來處理代碼，開啟深度學習的新時代。於是，黃立即指揮公司全力追逐人工智能。2017 年，當Google發佈被稱為 Transformer 的新型神經網絡架構（ ChatGPT 中的T）並引發當前的人工智能淘金熱時，NVIDIA 處於完美的位置，可以開始向饑餓的科技公司出售其專註於人工智能的 GPU。
NVIDIA 目前占據 AI 芯片市場 70% 以上的銷售額，估值剛剛超過 2 萬億美元。2023 年最後一個季度的收入為 220 億美元，比上年增長 265%。去年其股價上漲231%。黃要麼在他所做的事情上出奇地出色，要麼非常幸運——或者兩者兼而有之！——每個人都想知道他是如何做到的。
但沒有人能永遠統治。他現在成為中美科技戰的焦點，並受到監管機構的擺佈。黃仁勛在人工智能芯片領域的一些挑戰者是傢喻戶曉的名字——Google、亞馬遜、Meta 和微軟——並且在科技領域擁有最雄厚的財力。12月底，半導體公司AMD推出一款用於人工智能計算的大型處理器，旨在與NVIDIA競爭。初創公司也瞄準這一目標。研究公司 Pitchbook 的數據顯示，僅去年第三季度，風險投資傢就向人工智能芯片投資超過 8 億美元。
究竟黃仁勛是如何看待這些的呢？
讓我們來看一下這個采訪原文：
黃仁勛：你和我都是斯坦福大學的畢業生。
Lauren Goode：是的。嗯，我讀的是新聞專業，而你沒有讀新聞專業。
黃仁勛：我希望我有。
Lauren Goode：這是為什麼？
黃仁勛：嗯，作為領導者和個人，我真正敬佩的人是 Adobe 首席執行官尚塔努·納拉延 (Shantanu Narayen)。他說他一直想成為一名記者，因為他喜歡講故事。
Lauren Goode：能夠有效地講述企業的故事似乎是建立企業的重要組成部分。
黃仁勛：是的。戰略制定就是講故事。文化建設就是講故事。
Lauren Goode：您曾多次說過，您並沒有根據宣傳材料推銷 NVIDIA 的想法。
黃仁勛：這是正確的。這實際上是為講故事。
Lauren Goode：所以我想從另一位技術主管告訴我的事情開始。他指出，英偉達比亞馬遜早一年，但在很多方面，英偉達比亞馬遜更有“day one”的做法。您如何保持這種前景？
黃仁勛：坦白說，這確實是一個好詞。我每天早上醒來都像第一天一樣，原因是我們總是在做一些以前從未做過的事情。它也有脆弱的一面。我們很可能會失敗。剛才，我正在開會，我們正在做一些對我們公司來說是全新的事情，但我們不知道如何正確地做。
Lauren Goode：什麼是新事物？
黃仁勛：我們正在建設一種新型的數據中心。我們稱之為人工智能工廠。按照當今數據中心的構建方式，很多人共享一組計算機並將他們的文件放在這個大型數據中心中。人工智能工廠更像是一臺發電機。這是相當獨特的。過去幾年我們一直在構建它，但現在我們必須將其變成產品。
Lauren Goode：你打算怎麼稱呼它？
黃仁勛：我們還沒有給它命名。但它會無處不在。雲服務提供商將構建它們，我們將構建它們。每個生物技術公司都會有它。每個零售公司，每個物流公司。未來的每傢汽車公司都將擁有一傢制造汽車（實際商品、原子）的工廠，以及一傢為汽車制造人工智能（電子）的工廠。事實上，就在我們說話的時候，你看到埃隆·馬斯克正在這樣做。在思考工業公司未來會是什麼樣子方面，他遠遠領先於大多數人。
Lauren Goode：您之前曾說過，您經營的是一個扁平化組織，有 30 到 40 名高管直接向您匯報，因為您希望融入信息流中。最近是什麼激起你的興趣，讓你想，“我最終可能需要在這件事上押註 NVIDIA？”
黃仁勛：信息不必像尼安德特人時代那樣從組織的頂部流向底部，當時我們沒有電子郵件和短信以及所有這些東西。如今，信息流動得更加迅速。因此，不需要從上到下解釋信息的分層樹。扁平網絡使我們能夠更快地適應，這是我們所需要的，因為我們的技術發展如此之快。
如果你看看英偉達技術的發展方式，就會發現摩爾定律每隔幾年就會翻一番。嗯，在過去 10 年裡，我們已經將人工智能進步大約一百萬倍。這是摩爾定律的很多很多倍。如果您生活在一個指數世界中，您不希望信息一次從上到下一層傳播。
Lauren Goode：但我問你，你的羅馬帝國是什麼？這是一個模因。今天的transformer paper是什麼版本？現在正在發生什麼你覺得會改變一切的事情？
黃仁勛：有幾件事。其中之一並沒有真正的名字，但它是我們在基礎機器人領域所做的一些工作。如果你可以生成文本，如果你可以生成圖像，你也可以生成運動嗎？答案可能是肯定的。然後，如果您可以生成動作，您就可以理解意圖並生成通用版本的清晰度。因此，人形機器人技術應該指日可待。
我認為圍繞狀態空間模型（SSM：state-space models）的工作可能是下一個transformer，它允許您學習極長的模式和序列，而無需在計算中呈二次方增長。
Lauren Goode：這能帶來什麼？現實生活中的例子是什麼？
黃仁勛：您可以與計算機進行持續很長時間的對話，但上下文永遠不會被忘記。您甚至可以暫時改變主題並回到之前的主題，並且可以保留該上下文。您也許能夠理解極長鏈的序列，例如人類基因組。隻需查看遺傳密碼，您就可以解其含義。
Lauren Goode：我們距離這個目標還有多遠？
黃仁勛：從我們有 AlexNet 到超人的 AlexNet，隻用大約五年的時間。機器人基礎模型可能即將出現——我會在明年的某個時候公佈。從那時起，五年後，您將看到一些非常令人驚奇的事情。
Lauren Goode：哪個行業將從廣泛訓練的機器人行為模型中受益最多？
黃仁勛：嗯，重工業代表世界上最大的工業。移動電子並不容易，但移動原子卻極其困難。運輸、物流、將重物從一個地方移動到另一個地方、發現下一種藥物——所有這些都需要解原子、分子和蛋白質。這些是人工智能尚未影響到的巨大而令人難以置信的行業。
Lauren Goode：你提到摩爾定律。這個定律現在已經無關緊要嗎？
黃仁勛：摩爾定律現在更多地是一個系統問題，而不是一個芯片問題。更多的是關於多個芯片的互連性。大約 10、15 年前，我們開始分解計算機的旅程，以便您可以將多個芯片連接在一起。
Lauren Goode：這就是你在 2019 年收購以色列公司 Mellanox 的初衷。NVIDIA 當時表示，現代計算對數據中心提出巨大的要求，而 Mellanox 的網絡技術將使加速計算更加高效。
黃仁勛：對，完全正確。我們購買 Mellanox，這樣我們就可以擴展我們的芯片，將整個數據中心變成一個超級芯片，從而實現現代人工智能超級計算機。這實際上是為認識到摩爾定律已經結束，如果我們想繼續擴大計算規模，我們必須在數據中心規模上做到這一點。我們研究摩爾定律的制定方式，然後說：“不要受其限制。摩爾定律並不是計算的限制。” 我們必須拋棄摩爾定律，這樣我們才能考慮新的擴展方法。
Lauren Goode：Mellanox 現在被認為是 NVIDIA 一次非常明智的收購。早兩年，您試圖收購全球最重要的芯片 IP 公司之一 Arm，但遭到監管機構的阻撓。
黃仁勛：那太好！（That would’ve been wonderful!）
Lauren Goode：我不確定美國政府是否同意，但是是的，讓我們確定這一點。當您現在考慮收購時，您會關註哪些具體領域？
黃仁勛：這些大型系統的操作系統極其復雜。如何在計算堆棧中創建一個操作系統，以協調 GPU 中數千萬、數億乃至數十億個微型處理器？這是一個非常困難的問題。如果我們公司外部有團隊這樣做，我們可以與他們合作，或者我們可以做更多的事情。
Lauren Goode：你的言下之意是否代表著，對於 NVIDIA 來說，擁有一個操作系統並將其構建成一個平臺至關重要？
黃仁勛：我們已然是一傢平臺公司。
Lauren Goode：你越成為一個平臺，你面臨的問題就越多。人們往往會對平臺的輸出承擔更多的責任。自動駕駛汽車的行為方式、醫療保健設備的誤差幅度是多少、人工智能系統是否存在偏見。你如何解決這個問題？
黃仁勛：不過，我們不是一傢應用程序公司。這可能是最簡單的思考方式。我們將盡我們所能，但盡可能少地服務於一個行業。因此，就醫療保健而言，藥物發現不是我們的專長，計算才是。制造汽車不是我們的專長，但為汽車制造極其擅長人工智能的計算機，才是我們的專長。坦率地說，一傢公司很難擅長所有這些事情，但我們可以非常擅長其中的人工智能計算部分。
Lauren Goode：去年有報道稱，您的一些客戶為您的 AI GPU 等待幾個月。現在情況怎麼樣？
黃仁勛：嗯，我認為今年我們不會趕上供應。今年不會，明年也可能不會。（Well, I don’t think we’re going to catch up on supply this year. Not this year, and probably not next year.）
Lauren Goode：目前的等待時間是多少？
黃仁勛：我不知道現在的交貨時間是多少。但是，你知道，今年對我們來說也是新一代的開始。
Lauren Goode：您是指 Blackwell，您傳聞中的新 GPU 嗎？
黃仁勛：是的，新一代 GPU 即將問世，Blackwell 的性能超乎想象。這將是令人難以置信的。
Lauren Goode：這是否意味著客戶需要更少的 GPU？
黃仁勛：這就是目標。目標是極大地降低訓練模型的成本。然後人們可以擴大他們想要訓練的模型的規模。
Lauren Goode：英偉達投資很多人工智能初創公司。去年有報道稱，您投資 30 多傢初創公司。這些初創公司是否會在購買您的硬件時排長隊？
黃仁勛：他們和大傢一樣面臨著供應緊張的問題，因為他們大多數都使用公有雲，所以他們不得不自己與公有雲服務提供商進行談判。不過，他們確實獲得的是我們的人工智能技術，這意味著他們可以使用我們的工程能力和我們優化其人工智能模型的特殊技術。我們讓他們變得更有效率。如果您的吞吐量增加五倍，您實際上會多獲得五個 GPU。這就是他們從我們那裡得到的。
Lauren Goode：在這方面你認為自己是一個造王者嗎？
黃仁勛：不。我們投資這些公司是因為他們的工作令人難以置信。能夠投資它們是我們的榮幸，而不是相反。他們是世界上一些最聰明的人。他們不需要我們來支持他們的信譽。
Lauren Goode：當機器學習更多地轉向推理而不是訓練時（基本上，如果人工智能工作的計算強度降低）會發生什麼？這會減少對 GPU 的需求嗎？
黃仁勛：我們喜歡推理。事實上，我想說，如果我猜的話，NVIDIA 今天的業務可能是 70% 的推理，30% 的訓練。這是一件好事，因為那時你就會意識到人工智能終於成功。如果 NVIDIA 的業務 90% 是訓練，10% 是推理，你可能會說人工智能仍處於研究階段。七八年前就是這樣。但今天，每當您在雲中輸入提示時，它都會生成一些內容 - 它可以是視頻，可以是圖像，可以是 2D，可以是 3D，可以是文本，可以是圖形 - 它是最有可能的是它背後有一個 NVIDIA GPU。
Lauren Goode：您是否認為 AI GPU 的需求會在任何時候減弱？
黃仁勛：我認為我們正處於生成式人工智能革命的開端。如今，世界上進行的大部分計算仍然基於檢索。檢索意味著您觸摸手機上的某些內容，它會向雲端發送信號以檢索一條信息。它可能會用一些不同的東西組成一個響應，並使用 Java 將其呈現在您的手機的漂亮屏幕上。未來，計算將更加基於 RAG（Retrieval-augmented generation：檢索增強生成，這是一個框架，允許大型語言模型從其通常參數之外提取數據），它的檢索部分會更少，而個性化生成部分會高得多。
那一代將由 GPU 完成。所以我認為我們正處於這場檢索增強的生成計算革命的開端，生成人工智能將成為幾乎所有事物不可或缺的一部分。
Lauren Goode：最新消息是，你們一直在與美國政府合作，開發出可以運往中國的符合制裁規定的芯片。我的理解是這些不是最先進的芯片。為確保您仍然可以在中國開展業務，您與政府的合作有多密切？
黃仁勛：好吧，這其實是出口管制，而不是制裁。美國已確定英偉達的技術和人工智能計算基礎設施對國傢具有戰略意義，並將對其實施出口管制。我們首次遵守出口管制是在——
Lauren Goode：2022 年 8 月。
黃仁勛：是的。而美國在2023年對出口管制增加更多條款，導致我們不得不再次重新設計我們的產品。所以我們就這麼做。我們正在開發一套符合當今出口管制規則的新產品。我們與政府密切合作，確保我們提出的方案與他們的想法一致。
Lauren Goode：您對這些限制將刺激中國推出有競爭力的人工智能芯片有多大擔憂？
黃仁勛：中國有一些有競爭力的東西。
Lauren Goode：正確的。這還不是數據中心規模，但去年推出的華為 Mate 60 智能手機因其自主研發的 芯片而引起一些關註。
黃仁勛：真的非常非常好的公司（Really, really good company）。他們受到所擁有的半導體處理技術的限制，但他們仍然能夠通過將許多芯片聚合在一起來構建非常大的系統。
Lauren Goode：您總體上對中國能否在生成人工智能領域趕上美國感到擔憂嗎？
黃仁勛：該規定將限制中國獲得最先進技術的能力，這意味著西方世界，即不受出口管制限制的國傢，將能夠獲得更好的技術，而且發展速度相當快。所以我認為這種限制給中國帶來很大的成本負擔。從技術上講，您始終可以聚合更多的芯片制造系統來完成這項工作。但這隻會增加這些產品的單位成本。這可能是最簡單的思考方式。
Lauren Goode：你們正在制造合規芯片以繼續在中國銷售，這一事實是否會影響你們與臺積電（臺灣半導體的驕傲和喜悅）的關系？
黃仁勛：不。法規是具體的。這和限速沒什麼區別。
Lauren Goode：您多次說過，您的超級計算機中的 35,000 個組件中，有 8 個來自臺積電。當我聽到這個時，我想這一定是很小的一部分。您是否正在淡化對臺積電的依賴？
黃仁勛：一點都不。一點也不。
Lauren Goode：那麼你想表達什麼觀點呢？
黃仁勛：我隻是強調，為構建人工智能超級計算機，還涉及很多其他組件。事實上，在我們的人工智能超級計算機中，幾乎整個半導體行業都與我們合作。我們已經與三星、SK 海力士、英特爾、AMD、博通、Marvell 等密切合作。在我們的人工智能超級計算機中，當我們成功時，一大堆公司也會與我們一起成功，我們對此感到高興。
Lauren Goode：您多久與臺積電的張忠謀或劉德音交談一次？
黃仁勛：每時每刻。不斷地。是的。不斷地。
Lauren Goode：你們的談話是什麼樣的？
黃仁勛：這些天我們談論先進封裝，規劃未來幾年的產能，先進的計算能力。CoWoS [臺積電將芯片芯片和內存模塊塞入單個封裝的專有方法] 需要新工廠、新生產線和新設備。所以他們的支持真的非常非常重要。
Lauren Goode：我最近與一位專註於生成人工智能的首席執行官進行交談。我問 NVIDIA 的競爭對手可能是誰，這個人建議是Google的 TPU。其他人提到AMD。我想這對你來說並不是一個二元對立的問題，但你認為誰是你最大的競爭對手？誰讓你徹夜難眠？
黃仁勛：Lauren，他們都這樣做。TPU 團隊非常出色。最重要的是，TPU 團隊真的很棒，AWS Trainium 團隊和 AWS Inferentia 團隊真的非常出色，非常優秀。微軟正在進行內部 ASIC 開發，稱為 Maia。中國的每個雲服務提供商都在構建內部芯片，還有一大堆初創公司以及現有的半導體公司正在構建出色的芯片。每個人都在構建芯片。
這不應該讓我徹夜難眠——因為我應該確保我已經因工作而精疲力盡，以至於沒有人可以讓我徹夜難眠。這確實是我唯一能控制的事情。
但早上叫醒我的肯定是，我們必須繼續兌現我們的承諾，也就是說，我們是世界上唯一一傢每個人都可以合作構建數據中心規模人工智能超級計算機的全堆棧公司。
Lauren Goode：我有一些個人問題想問你。
黃仁勛：[黃對公關代表說]她已經做好功課。更不用說，我隻是很享受這次談話。
Lauren Goode：我很高興。我也是。我確實想——
黃仁勛：順便說一句，每當張忠謀或我認識很久的人要求我擔任采訪主持人時，原因是我不會坐在那裡通過提問來采訪他們。我隻是在和他們交談。你必須對觀眾以及他們可能想聽的內容抱有同理心。
Lauren Goode：所以我向 ChatGPT 詢問一個關於你的問題。我想知道你是否有紋身，因為我打算在下次聚會時提議給你紋身。
黃仁勛：如果你紋身，我也紋一個。
Lauren Goode：我已經有一個，但我一直在尋求擴展。
黃仁勛：我也有一個。
Lauren Goode：是的。這是我從 ChatGPT 學到的。據稱，黃仁勛在股價達到 100 美元時紋公司標志。然後它說，“然而，黃表示他不太可能再紋身，並指出疼痛比他預期的更劇烈。” 據說你哭。你哭嗎？
黃仁勛：一點點。我的建議是，在這樣做之前你應該喝一杯威士忌。或者服用Advil。我還認為女性可以承受更多的痛苦，因為我女兒有一個相當大的紋身。
Lauren Goode：所以，如果你想紋身，我想三角形可能會不錯，因為誰不喜歡三角形呢？它們是完美的幾何形狀。
黃仁勛：或者 NVIDIA 大樓的輪廓！它是由三角形組成的。
Lauren Goode：這是一個承諾。我想知道，您個人使用 ChatGPT 或 Bard 等的頻率如何？
黃仁勛：我一直在使用Bard，我也喜歡 ChatGPT。我幾乎每天都使用兩者。
Lauren Goode：為什麼？
黃仁勛：研究。例如，計算機輔助藥物發現。也許您想解計算機輔助藥物發現的最新進展。因此，您想要構建整個主題，以便您可以擁有一個框架，並且從該框架中，您可以提出越來越多的具體問題。我真的很喜歡這些大型語言模型。
Lauren Goode：我聽說你曾經舉重。你現在還這樣做嗎？
黃仁勛：不，我會嘗試每天做 40 個俯臥撐。這不會花費超過幾分鐘的時間。我是一個懶惰的鍛煉者。我會一邊刷牙一邊做深蹲。
Lauren Goode：最近，您對Acquired播客發表評論，該播客迅速走紅。主持人問，如果你今天30歲，正在考慮創辦一傢公司，你會開始什麼？你還說你根本不會創辦公司。您對此有何修改？
黃仁勛：這個問題可以用兩種方式來回答，我是這樣回答的，那就是：如果我當時知道我現在所知道的所有事情，我會因為害怕而不敢去做。我會太害怕。我不會這麼做的。
Lauren Goode：你必須有一定的妄想才能創業。
黃仁勛：這就是無知的好處。你不知道這會是多麼艱難，你不知道其中會包含多少痛苦和磨難。這些天當我遇到企業傢時，他們告訴我這將是多麼容易，我非常支持他們，而且我實際上並沒有試圖戳破他們的泡沫。但我內心深處知道，“哦，天哪，事情不會像他們想象的那樣。”
Lauren Goode：您認為您在運營 NVIDIA 過程中必須做出的最大犧牲是什麼？
黃仁勛：其他企業傢也做出同樣的犧牲。你工作真的非常努力。很長一段時間，沒有人認為你會成功。隻有你一個人相信自己會成功。不安全感、脆弱感，有時還有羞辱，這些都是真實的。沒有人談論這件事，但這都是真的。首席執行官和企業傢和其他人一樣都是人。當他們公開失敗時，那就令人尷尬。
所以當有人說，“Jensen，以你今天所擁有的一切，你不會開始它嗎？” 就像，“不，不，不，當然不是。”
事實上，如果我知道NVIDIA 會成為今天的樣子，你問我會創辦這傢公司嗎？你在開玩笑嗎？我願意犧牲一切來做到這一點。
原文鏈接
https://www.wired.com/story/nvidia-hardware-is-eating-the-world-jensen-huang/