奧特曼回答一切:Ilya確實看到了了不起的東西,OpenAI也缺算力

機器之心報道

機器之心編輯部

北京時間 11 月 1 日凌晨,OpenAI 宣佈爲 ChatGPT 推出了最新的人工智能搜索體驗。

在宣佈發佈 ChatGPT 搜索後不久,OpenAI 還在 Reddit 上進行了 AMA 問答。

在問到 Ilya 到底看到了什麼時?

OpenAI 首席執行官Sam Altman 回答道:「超然(transcendent)的未來。Ilya 是一位卓越的遠見者,比大多數人更清晰地洞察未來。他的早期構想、激情和願景對我們的許多成就至關重要。例如,他是最初探索和倡導一些最終成爲 o1 理念的關鍵人物之一。這個領域非常幸運擁有他。」

Altman 還承認,缺乏算力是阻礙公司按時出產品的一個主要因素。

「所有這些模型都變得相當複雜,」他在回答 OpenAI 的下一代 AI 模型爲何耗時這麼長的問題時寫道。「我們還面臨許多限制和艱難的決定,即如何將計算分配給許多偉大的想法。」

除了這些信息,在 Reddit AMA 上還有哪些信息值得關注,機器之心報道的文章《剛剛!ChatGPT 正式成爲 AI 搜索,免費可用》中,已經爲大家精選了一些問答,感興趣的讀者可以前去閱讀。

今天,我們將繼續爲大家盤點一下 AMA 問答中的一些其他重要信息。

總的來說,AMA 問答主要圍繞以下幾個方面:

參與者包括:

問:GPT4o 的 token 上下文什麼時候會增加。在我看來,與其他 AI 模型相比,32k 太小了,尤其是對於較長的編碼或寫作任務來說。

Kevin Weil:同意,我們正在努力改進。

問:你們計劃繼續發佈 o 系列模型?還是改進常規模型,例如 gpt 3、4、4o、5。又或者是兩者都有或者兩者的組合?

Kevin Weil:兩者都有!我預計在某個時候它們會融合在一起。

問:有什麼是你希望 ChatGPT 能做但還不能做的事情?

Srinivas Narayanan:我希望它能更好地瞭解我的個人信息,並代表我採取行動。

問:ChatGPT 生日有什麼特別的禮物嗎?

Kevin Weil:GPUs。

問:ChatGPT 最終能夠自己執行任務嗎?

Kevin Weil:這將是 2025 年的一大主題。

問:一旦實現了 AGI,你最想將它應用到什麼地方?

Srinivas Narayanan:我希望它能加速科學發現。我個人對健康 / 醫學非常感興趣。

問:AGI 是可以用已知的硬件實現,還是需要完全不同的東西?

Sam Altman:我們相信這在現有的硬件條件下是可以實現的。

問:AGI 是否可以通過已知的神經網絡架構來實現,還是需要新的科學(基礎)突破?

Mark Chen:如果架構上的突破是由現有的 LLM 提出的,這算嗎?

問:完整的 o1 真的比 o1-preview 有明顯的改進嗎?

Srinivas Narayanan:是的。

問:ChatGPT search 是否仍在使用 Bing 作爲後臺搜索引擎?

Srinivas Narayanan:我們使用一系列服務,Bing 是其中重要的一個。

問:有關 GPT4o 圖像和 3D 模型生成的更多信息何時發佈?

Mark Chen:很快。

問:o1 將如何影響 LLM 的擴展?會繼續按照 scaling laws 擴展 LLM 嗎?還是將重點轉向通過優化推理計算時間來實現更小、更快且具有更長推理能力的模型。

Kevin Weil:這不是非此即彼,而是兩者兼而有之 —— 更好的基礎模型加上更多的擴展 / 推理時間計算。

問:LLM 產生幻覺這個問題會一直存在嗎?即使是 o1-preview,也會產生幻覺。

Mark Chen:我們非常重視減少幻覺,但這從根本上來說是一個難題 —— 我們的模型從人類書寫的文本中學習,而人類有時會自信地表達他們不確定的事情。

我們的模型在引用信息方面正在改進,這使得它們的答案有可靠的來源作爲依據,我們也相信強化學習也將有助於解決幻覺問題 —— 當我們可以通過編程檢查模型是否產生幻覺時,我們可以獎勵它不產生幻覺。

問:很多頂尖人才離開 OpenAI,如何應對這種壓力?這會增加額外的負擔嗎?我們距離 AGI 還有多遠?

Srinivas Narayanan:雖然我們很遺憾失去了一些曾經緊密合作過的人,但我們有非常有才華的團隊,還有許多最近加入的新員工。

問:當初發佈 ChatGPT 時,有什麼讓你感到驚訝嗎?

Sam Altman:最重要的是人們對它的喜愛。

該產品的早期版本是一個非常非常幼稚的原型。現在它相當不錯,但當時肯定不是,它不是很準確,沒有很多功能,總是出現故障,等等。然而人們發現它具有足夠的價值,可以繼續使用它。

問:關於未來。如果你現在 15 歲,爲了將來的成功,你會專注於哪些技能或途徑?

Srinivas Narayanan:適應能力和學會學習可能是最重要的事情。

問:4o 中的 o 和 o1 中的 o 是一個意思嗎?

Kevin Weil:不是。

問:作爲一名經驗豐富的創始人並且與許多人密切合作,你如何看待 AI 在創業過程中爲創始人提供的幫助?創業精神將因此發生哪些變化?

Sam Altman:我對此感到非常興奮!如果創始人的生產力可以提高 10 倍,我們將擁有更多(更好的)初創企業。這在很多方面都比擁有 10 人的創始團隊更好(例如,協調開銷更少)。

雖然生產力提高 10 倍還遙遙無期,但我相信它會發生。由此產生的總體經濟加速,尤其是對初創企業而言,將是巨大的。

問:AI 在未來個性化輔導中將扮演什麼角色?

Srinivas Narayanan:這絕對是改變人們學習方式的巨大機會。它還可以幫助教師補充他們的課程計劃。

https://www.reddit.com/r/ChatGPT/comments/1ggixzy/ama_with_openais_sam_altman_kevin_weil_srinivas/