OpenAI宣布其GPT-4Turbo with Vision現已在API中正式推出。
現在可以通過文本格式的JSON和函數調用來請求使用模型的視覺識別和分析能力,生成JSON代碼片段,開發人員可以用它來自動化其連接應用程序中的操作,比如“發送電子郵件、在網上發布內容、進行購買”等。
OpenAI在其API頁面上指出,我們強烈建議在代表用戶採取影響世界的行動之前,建立用戶確認流程。
OpenAI發言人表示,這些變化有助於簡化開發人員的工作流程並打造更高效的應用程序,因為“以前,開發人員必須對文本和圖像使用單獨的模型,但現在,只需一次API調用,該模型就可以分析圖像並應用推理。”