学习贯彻党的二十届三中全会精神

GPT-4o

GPT-4o是OpenAI为聊天机器人ChatGPT发布的一款多模态大模型,于2024年5月14日发布。其中“o”代表“omni”,该词意为“全能”,源自拉丁语“omnis”

GPT-4o模型可以使ChatGPT能够处理50种不同的语言。并可以接受文本、音频和图像三者组合作为输入,并生成文本、音频和图像的任意组合输出。GPT-4o可以在短至232毫秒的时间内响应音频输入,平均为320毫秒,与人类的响应时间相似。性能方面,在传统基准测试中,GPT-4o在文本、推理和编码等方面实现了与GPT-4 Turbo级别相当的性能,同时在多语言、音频和视觉功能方面的表现分数也创下了新高。

相较于2023年11月推出的GPT-4 Turbo,GPT-4o在处理速度上提升达到200%,同时在价格上也下降了50%,并分阶段集成至OpenAI的各个产品之中。ChatGPT的免费用户也可以通过GPT-4o模型,进行数据分析、图像分析、互联网搜索、访问应用商店等操作。2024年5月14日,GPT-4o向ChatGPT Plus和Team的客户全面推出。当地时间5月15日,OpenAI联合创始人兼首席执行官山姆·奥特曼称,GPT-4o的文本模式已经发布,但语音模式还未发布。5月20日,微软推出GPT-4o加持的AI PC(人工智能个人电脑)系列。美国东部时间6月10日,苹果公司宣布与OpenAI合作,会把ChatGPT集成在苹果系统生态中,由最新的GPT-4o驱动。美东时间7月18日,Open AI发布了大模型GPT-4o mini,具备文本、图像、音频、视频的多模态推理能力。8月,GPT-4o新版本上线,在输入和输出分别节省50%和33%花费的情况下,能力得到全方位提升,在ZeroEval基准测试中排名世界第一。

发展历程

2024年5月14日,OpenAI(美国人工智能研究公司)在线上举办“春季更新”活动。在活动中,OpenAI发布了新旗舰模型“GPT-4o”。同日,GPT-4o向ChatGPT Plus和Team的客户全面推出。与现有模型相比,GPT-4o展现出了其在视觉和音频理解方面的出色技能。和GPT-4相比,GPT-4o的最大区别在于,所有模态都集成在一个模型中,多模态整合更精细,延迟仅300毫秒左右,同时能够感知情绪、语气、表情,实现更自然的交互,这需要数据组织能力、聚焦突破能力、工程优化能力,也扩大了人们对于交互的想象空间。OpenAI没有推出搜索引擎,但是基于ChatGPT或GPT-4o,未来人类获得信息的方式很可能会改变,GPT-4o或为OpenAI开启了一个超级入口。当地时间5月15日,OpenAI联合创始人兼首席执行官山姆·奥特曼称,GPT-4o的文本模式已经发布,但语音模式还未发布。5月20日,微软推出GPT-4o加持的AI PC(人工智能个人电脑)系列,微软高管们将其称为“史上最强、最智能的Windows PC”。

当地时间2024年6月10日,苹果公司宣布与OpenAI合作,会把ChatGPT集成在苹果系统生态中,由最新的GPT-4o驱动。6月19日,OpenCompass发布了首个大模型高考全卷评测结果,OpenAI的GPT-4o排名第二,得分296分(语数外三科加起来的满分为420分)。美东时间7月18日,Open AI在官网发布了大模型GPT-4o mini,具备文本、图像、音频、视频的多模态推理能力。GPT-4o mini已取代了GPT-3.5 Turbo。GPT-4o mini的性能比GPT-4好,但API的价格却下降了60%,每100万tokens的输入为15美分,每100万tokens的输出为60美分。8月,GPT-4o新版本上线,在输入和输出分别节省50%和33%花费的情况下,能力得到全方位提升,在ZeroEval基准测试中排名世界第一。最新版模型“GPT-4o-2024-08-06”在JSON模式评估中,得分100%。相比之下,2023年6月的版本得分还低于40%。在代码编辑方面,最新版本的基准得分和此前版本相同,但是现在成本只有原来的一半。同时,新版本也是OpenAI在图像输入上最便宜的型号。

2025年2月,OpenAI首席执行官Sam Altman宣布GPT 4o升智,智力达到o3 pro水平。3月25日,OpenAI宣布推出GPT-4o图像生成功能,把先进图像生成器集成至GPT-4o。ChatGPT和Sora平台的各类用户计划陆续体验该功能,企业版与教育版也计划接入该功能具有精准文本渲染、严格遵循指令、深度调用知识及对话上下文等特点,还能对上传图像进行二次创作等。

2025年4月11日,OpenAL宣布ChatGPT昨日移除GPT-4模型,全面升级至新型原生多模态模型GPT-4o,但仍在APl中使用,GPT-4o在写作质量、编程辅助、STEM领域全面超越GPT-4模型,并升级改善了GPT-4o的指令遵循、问题解决和对话流程。

功能和服务

GPT-4o所有功能包括视觉、联网、记忆、执行代码以及GPT Store等,对所有用户免费开放。

应用领域

ChatGPT的用户(包括免费用户)可以用GPT-4o模型(更新前只能使用GPT-3.5),来进行数据分析、图像分析、互联网搜索、访问应用商店等操作。

产品命名

GPT-4o的“o”代表“omni”。该词意为“全能”,源自拉丁语“omnis”。在英语中“omni”常被用作词根,用来表示“全部”或“所有”的概念,凸显了其多功能的特性。

相关评价

GPT-4o的发布有望掀起新一轮全球AI浪潮,人工智能AIETF(515070)、机器人ETF(562500)等AI产业链相关产品有望受催化。(上海第一财经传媒有限公司评)

相关事件

AI大模型高考全卷评测排名

2024年6月19日, 上海人工智能实验室旗下司南评测体系OpenCompass发布了首个大模型高考全卷评测结果。语数外三科加起来的满分为420分,此次高考测试结果显示,阿里通义千问2-72B排名第一,为303分;OpenAI的GPT-4o排名第二,得分296分;上海人工智能实验室的书生·浦语2.0排名第三,三个大模型的得分率均超过70%。从结果来看,大模型的语文、英语考试水平普遍不错,但数学都不及格。从单科成绩看,GPT-4o的语文得分为111.5分,排第三;GPT-4o的数学得分为73分,排第二;GPT-4o的英语得分为111.5分,排第一。

6月24日,在极客公园最新发布的高考新课标Ⅰ卷大模型评测报告中,GPT-4o 以562分排名文科总分第一。本次评测默认所有大模型的听力都获得30分满分。阅读和语言运用两项,GPT-4o获得80分满分。在40分的写作考试中,GPT-4o获得最高分29分。在由历史、地理、政治组成的新课标文综考卷评测中,GPT-4o获得237分的成绩,平均分达到79分。政治考试中,GPT-4o获得了88分的最高分。地理考卷GPT-4o得到最高分68分。河南省高考分数段统计数据显示,本次大模型高考评测与河南省考卷完全相同,河南高考录取分数线显示,文科本科一批录取分数线为521分,GPT-4o在文科考生中排名8811名,相当于人类考生的前2.45%。所有大模型在数学、物理、化学等数理学科上都无法达到及格水平,大模型的理科最好成绩还无法进入人类考生的前30%。以数学试卷为例,9款大模型产品中,GPT-4o、文心一言4.0和豆包获得60分以上成绩(满分150分),化学和物理试卷,各模型平均分分别是34分和39分(满分为100和110)。化学单项最高分由豆包获得,成绩为49.5分,GPT-4o为42分。

失控行为首次公开

当地时间2024年8月8日,OpenAI在其官网发布了GPT-4o的安全技术报告,报告详尽阐述了研究人员在GPT-4o发布前进行的安全防护与风险评估工作。报告指出,GPT-4o的整体风险评级为“中等”。报告还首次揭示了GPT-4o的若干失控行为,诸如模仿用户声音、发出怪异的尖叫等。此外,OpenAI还表示,用户在使用GPT-4o语音模型时,可能会对其产生感情上的依恋。

参考资料

重磅!类人速度超快语音响应!OpenAI推出新旗舰模型GPT-4o,图文音频手机AI搞定.四川经济网国际频道.2024-05-14

ChatGPT火爆背后有何法律风险?.法制网.2023-02-16

“ChatGPT”会不正常吗?欧盟欲设制度规范其使用.看看新闻.2023-02-16

ChatGPT会影响到人类社会吗.人民政协网.2023-02-16

​风口上的AI聊天机器人.手机中国网.2023-02-16

ChatGPT发布一周年之际 人工智能革命才刚刚开始.新浪财经.2023-12-11

3分钟速览OpenAI春季发布会:GPT-4o炸裂登场!听说读写丝滑如真人.科创板日报.2024-05-14

OpenAI新模型GPT-4o“炸裂登场”.百家号.2025-03-12

OpenAI发布免费新品GPT-4o:可对音频、视觉和文本实时推理,与人自然对话,功能秒杀Siri.澎湃新闻.2025-05-04

环球视角:OpenAI推出新一代AI模型GPT-4o.环球科技.2024-05-14

OpenAI发布全新生成式 AI 模型GPT-4o:语音对话更流畅,免费提供.IT之家.2024-05-14

OpenAI推出新旗舰模型GPT-4o “属于每个人的云端情人来了”.上游新闻.2024-05-14

GPT-4o!OpenAI推出新款人工智能模型.东方财富网.2024-05-14

环球视角:OpenAI推出新一代AI模型GPT-4o.环球网科技.2024-05-14

OpenAI山姆·奥特曼:新款语音模型GPT-4o尚未发布.界面新闻.2024-06-16

挑战苹果!微软推出最新大模型加持的Windows笔记本,号称史上最智能.澎湃新闻-今日头条.2024-05-21

苹果官宣ChatGPT集成于全系统生态.新浪科技-新浪微博.2024-06-11

Vision Pro将在中国开卖,起售价近3万.每日经济新闻-今日头条.2024-06-11

利空突袭!大跌超500点.今日头条.2024-07-19

GPT4o更新丝滑解决9.11和9.9谁大,更强也更便宜了.百家号.2024-08-07

解读|GPT-4o为OpenAI开启超级入口,对谷歌形成挑战?.今日头条.2024-05-15

首个AI高考全卷评测结果发布:最高分303,数学全不及格.今日头条.2024-06-20

OpenAI首席执行官Sam Altman宣布GPT 4o升智.腾讯网.2025-02-16

OpenAI推出GPT-4o图像生成功能.界面新闻.2025-03-27

OpenAI宣布:ChatGPT将停用GPT4模型,全面升级至4o版本.今日头条.2025-04-12

重磅!类人速度超快语音响应!OpenAI推出新旗舰模型GPT-4o,图文音频手机AI搞定.每日经济新闻.2024-05-14

OpenAI发布新款人工智能模型GPT-4o.百家号.2024-05-14

OpenAI发布新模型GPT-4o,平均响应时间为320毫秒,“几乎接近人类交谈”.中国网.2025-03-12

OpenAI发布人工智能新模型 称其“会听会看会说”.央视新闻客户端.2024-06-16

OpenAI一夜改写历史,GPT-4o聊天机器人干翻所有语音助手,人工智能AIETF(515070)开盘冲高.东方财富网.2024-05-14

大模型2024高考发榜,豆包等三款国产AI考上文科一本线.今日头条.2024-06-25

GPT-4o失控行为首次公开:克隆人类声音、诡异尖叫!网友直呼“毛骨悚然”.百家号.2024-08-10

河南工人日报数字报