奧特曼回答一切:Ilya確實看到了了不起的東西,OpenAI也缺算力
機器之心報道
機器之心編輯部
北京時間 11 月 1 日凌晨,OpenAI 宣佈爲 ChatGPT 推出了最新的人工智能搜索體驗。
在宣佈發佈 ChatGPT 搜索後不久,OpenAI 還在 Reddit 上進行了 AMA 問答。
在問到 Ilya 到底看到了什麼時?
OpenAI 首席執行官Sam Altman 回答道:「超然(transcendent)的未來。Ilya 是一位卓越的遠見者,比大多數人更清晰地洞察未來。他的早期構想、激情和願景對我們的許多成就至關重要。例如,他是最初探索和倡導一些最終成爲 o1 理念的關鍵人物之一。這個領域非常幸運擁有他。」
Altman 還承認,缺乏算力是阻礙公司按時出產品的一個主要因素。
「所有這些模型都變得相當複雜,」他在回答 OpenAI 的下一代 AI 模型爲何耗時這麼長的問題時寫道。「我們還面臨許多限制和艱難的決定,即如何將計算分配給許多偉大的想法。」
除了這些信息,在 Reddit AMA 上還有哪些信息值得關注,機器之心報道的文章《剛剛!ChatGPT 正式成爲 AI 搜索,免費可用》中,已經爲大家精選了一些問答,感興趣的讀者可以前去閱讀。
今天,我們將繼續爲大家盤點一下 AMA 問答中的一些其他重要信息。
總的來說,AMA 問答主要圍繞以下幾個方面:
參與者包括:
問:GPT4o 的 token 上下文什麼時候會增加。在我看來,與其他 AI 模型相比,32k 太小了,尤其是對於較長的編碼或寫作任務來說。
Kevin Weil:同意,我們正在努力改進。
問:你們計劃繼續發佈 o 系列模型?還是改進常規模型,例如 gpt 3、4、4o、5。又或者是兩者都有或者兩者的組合?
Kevin Weil:兩者都有!我預計在某個時候它們會融合在一起。
問:有什麼是你希望 ChatGPT 能做但還不能做的事情?
Srinivas Narayanan:我希望它能更好地瞭解我的個人信息,並代表我採取行動。
問:ChatGPT 生日有什麼特別的禮物嗎?
Kevin Weil:GPUs。
問:ChatGPT 最終能夠自己執行任務嗎?
Kevin Weil:這將是 2025 年的一大主題。
問:一旦實現了 AGI,你最想將它應用到什麼地方?
Srinivas Narayanan:我希望它能加速科學發現。我個人對健康 / 醫學非常感興趣。
問:AGI 是可以用已知的硬件實現,還是需要完全不同的東西?
Sam Altman:我們相信這在現有的硬件條件下是可以實現的。
問:AGI 是否可以通過已知的神經網絡架構來實現,還是需要新的科學(基礎)突破?
Mark Chen:如果架構上的突破是由現有的 LLM 提出的,這算嗎?
問:完整的 o1 真的比 o1-preview 有明顯的改進嗎?
Srinivas Narayanan:是的。
問:ChatGPT search 是否仍在使用 Bing 作爲後臺搜索引擎?
Srinivas Narayanan:我們使用一系列服務,Bing 是其中重要的一個。
問:有關 GPT4o 圖像和 3D 模型生成的更多信息何時發佈?
Mark Chen:很快。
問:o1 將如何影響 LLM 的擴展?會繼續按照 scaling laws 擴展 LLM 嗎?還是將重點轉向通過優化推理計算時間來實現更小、更快且具有更長推理能力的模型。
Kevin Weil:這不是非此即彼,而是兩者兼而有之 —— 更好的基礎模型加上更多的擴展 / 推理時間計算。
問:LLM 產生幻覺這個問題會一直存在嗎?即使是 o1-preview,也會產生幻覺。
Mark Chen:我們非常重視減少幻覺,但這從根本上來說是一個難題 —— 我們的模型從人類書寫的文本中學習,而人類有時會自信地表達他們不確定的事情。
我們的模型在引用信息方面正在改進,這使得它們的答案有可靠的來源作爲依據,我們也相信強化學習也將有助於解決幻覺問題 —— 當我們可以通過編程檢查模型是否產生幻覺時,我們可以獎勵它不產生幻覺。
問:很多頂尖人才離開 OpenAI,如何應對這種壓力?這會增加額外的負擔嗎?我們距離 AGI 還有多遠?
Srinivas Narayanan:雖然我們很遺憾失去了一些曾經緊密合作過的人,但我們有非常有才華的團隊,還有許多最近加入的新員工。
問:當初發佈 ChatGPT 時,有什麼讓你感到驚訝嗎?
Sam Altman:最重要的是人們對它的喜愛。
該產品的早期版本是一個非常非常幼稚的原型。現在它相當不錯,但當時肯定不是,它不是很準確,沒有很多功能,總是出現故障,等等。然而人們發現它具有足夠的價值,可以繼續使用它。
問:關於未來。如果你現在 15 歲,爲了將來的成功,你會專注於哪些技能或途徑?
Srinivas Narayanan:適應能力和學會學習可能是最重要的事情。
問:4o 中的 o 和 o1 中的 o 是一個意思嗎?
Kevin Weil:不是。
問:作爲一名經驗豐富的創始人並且與許多人密切合作,你如何看待 AI 在創業過程中爲創始人提供的幫助?創業精神將因此發生哪些變化?
Sam Altman:我對此感到非常興奮!如果創始人的生產力可以提高 10 倍,我們將擁有更多(更好的)初創企業。這在很多方面都比擁有 10 人的創始團隊更好(例如,協調開銷更少)。
雖然生產力提高 10 倍還遙遙無期,但我相信它會發生。由此產生的總體經濟加速,尤其是對初創企業而言,將是巨大的。
問:AI 在未來個性化輔導中將扮演什麼角色?
Srinivas Narayanan:這絕對是改變人們學習方式的巨大機會。它還可以幫助教師補充他們的課程計劃。
https://www.reddit.com/r/ChatGPT/comments/1ggixzy/ama_with_openais_sam_altman_kevin_weil_srinivas/