上周是暗流涌動的一周。Google 和 OpenAI 在面對開源模型的競爭,政府在討論 AI 的威脅,而一些可能已經受到 AI 影響的文字工作者已經在罷工了。
下面讓我們來回顧上一周的 AI 大新聞。
5 月 2 日
Hollywood writers strike over pay and AI - Dailynewsegypt
美國作家協會(WGA)在當地時間 5 月 2 日早上投票決定舉行罷工抗議。其主要原因是編劇們的薪酬過低以及反對好萊塢啟用 AI 代替編劇。
https://en.wikipedia.org/wiki/2023_Writers_Guild_of_America_strike
5 月 3 日
有消息稱,對於擔憂隱私洩漏的用戶,微軟準備提供一個運行在專有設備上的 chatgpt—— 只不過得加錢。
5 月 4 日
一份谷歌內部文件在公共 Discord 伺服器上被分享,其中一名內部研究員直接指出谷歌和 OpenAI 都沒有「護城河」,也就是可持續的競爭優勢。相反,這位研究員認為,開源模型才是 AI 企業大戰的最終贏家,並盛讚了 LoRA 這種能以極低的成本和時間實現模型微調的技術。
上面的這篇文章還詳細列舉了從年初以來開源模型的進展,相當有參考價值。
同日,Bing chat 宣布支持插件了,還將引入聊天持續性和聊天記錄,以及多種方式的回答(如答案可視化圖表化等),且完全開放使用而無需 waitlist。
Image
同日,在上周宣稱自己在 Code LLM 中效果最好的 replitreplit-code-v1-3b 正式公開。
5 月 5 日
美國總統喬・拜登在白宮會見了人工智能領域頂尖公司的首席執行官,包括微軟和谷歌母公司 Alphabet 的 CEO,強調了 AI 的潛力和可能影響全球人民的危險。谷歌的 CEO 桑達爾・皮查伊、微軟的薩蒂亞・納德拉和 OpenAI 的薩姆・阿爾特曼參加了這次高層會議。https://www.whitehouse.gov/briefing-room/statements-releases/2023/05/04/readout-of-white-house-meeting-with-ceos-on-advancing-responsible-artificial-intelligence-innovation/
同日,HuggingFace 公開了自己的 Code LLM:StarCoder,宣稱是市面上最好的開源 Code LLM。
Image
StarCoder 和 StarCoderBase 是在 GitHub 的許可數據上訓練的大型代碼語言模型(Code LLMs),包括來自 80 多種編程語言、Git commits、GitHub issues 和 Jupyter notebooks。StarCoderBase 與 LLaMA 類似,用 1 萬億個標記訓練了一個~15B 的參數模型。StarCoder 則是對 StarCoderBase 模型進行了微調,用於 35B 個 Python token。 據稱,StarCoderBase 在流行的編程基準上優於現有的開放代碼 LLMs,並匹配或超過封閉模型,如 OpenAI 的 code-cushman-001(為 GitHub Copilot 的早期版本提供支持)。
相關鏈接:
https://huggingface.co/bigcode
5 月 7 日
提示詞工程師是個好工作嗎?現在可能是,以後將不再是,至少 OpenAI 的開發者支持 Staff LoganK 是這麼認為的。他甚至說即使別人給你錢讓你做你也不應該把這個作為職業,這個職位現在看上去很缺人但缺少「long term success」的基礎。 簡短的概括一下他的意見: 許多人都在關注人工智能,思考它將如何顛覆就業市場,並試圖為自己的未來做好定位。 這是 100% 正確的做法。絕大多數媒體的敘事都圍繞著提示詞工程將是未來最好的工作這一事實。 問題是,越來越多的提示工程將由人工智能系統自己完成。 現在產品中已經有了一堆這樣的好例子。而且它只會變得更好。 終有一天,ChatGPT 可以綜合你以前的對話,並根據語境為你的查詢做一些自動提示工程。 這並不是說那些深刻理解如何使用這些系統的人不會有價值,但我想像這將是作為人們標準教育途徑的一部分而學習的技能,而不是只有少數人擁有的特殊才能(像今天這樣)。
如果這篇有幫助,請訂閱轉發,也可以 fo 我的推特。我將帶給你更多關於 Web3,Layer2,AI,以及日本相關咨詢: