当前位置:中国企业报道>> 资讯服务>> 品牌>>正文内容

阶跃星辰:多模态理解与生成统一,AI进化的关键节点

2024年07月06日 来源:中国企业报道

在2024年的世界人工智能大会(WAIC)上,阶跃星辰以其Step系列大模型的全面升级和多模态技术的卓越展现,成为瞩目的焦点。从语言模型到多模态模型,从理解到生成,阶跃星辰正沿着多模态理解与生成统一的技术路线,探索构建具身智能,迈向AGI的关键路径。

万亿参数MoE:奠定多模态统一的基石

阶跃星辰的Step-2万亿参数MoE大模型,不仅在参数量上实现了巨大突破,更在多模态理解与生成的统一中扮演了核心角色。通过自主研发而非简单的upcycle方式,阶跃星辰在MoE架构上进行了创新,包括部分专家共享参数和异构化专家设计,这不仅保证了模型的多样性与高性能,还使其在数学、逻辑、编程等多个领域展现出逼近GPT-4的能力。Step-2的问世,为后续多模态模型的训练提供了强大的基础,成为多模态统一探索的基石。

多模态理解:从感知到认知的飞跃

Step-1.5V多模态大模型的升级,标志着阶跃星辰在多模态理解能力上的显著提升。它不仅能准确理解复杂的图表和流程图,还能感知物理空间的几何位置,处理高分辨率图像,甚至理解视频中的人物情感和整体氛围。这种感知能力的飞跃,得益于Step-2万亿参数模型的指导,通过RLHF训练,Step-1.5V的推理能力显著增强,能够在图像内容的基础上进行数学解题、代码编写、诗歌创作等高级推理任务,展现了从感知到认知的深度理解能力。

图像生成:中国元素的深度优化

Step-1X图像生成大模型的推出,是阶跃星辰在多模态生成领域的重要突破。它不仅在语义对齐和指令跟随能力上表现突出,还针对中国元素进行了深度优化,生成的图像更符合国人的审美风格。Step-1X采用了全链路自研的DiT架构,设计了600M、2B、8B三种不同参数量的版本,以适应不同场景下的生成需求,展现了阶跃星辰在多模态生成技术上的领先优势。

多模态统一:构建具身智能的基石

阶跃星辰的创始人姜大昕博士曾指出,大模型的演进将经历从单一模态发展到多模态融合,再到生成与理解统一的过程,最终与机器人结合形成具身智能。阶跃星辰正沿着这一路径,通过Step-2、Step-1.5V和Step-1X等模型,探索多模态理解与生成的统一,为构建具身智能打下坚实基础。从语言到视觉,从理解到生成,阶跃星辰的每一步探索,都是AI进化史上的重要节点。

在通往AGI的征途中,多模态理解与生成的统一是不可或缺的环节。阶跃星辰通过其Step系列大模型的持续创新,不仅展示了在多模态技术上的深厚积累,更为AI行业的未来发展提供了新的视角和可能。从感知到认知,从理解到生成,阶跃星辰正以坚实的步伐,引领着AI领域向着更加智能、更加多元的未来迈进。

责任编辑:杜烽
相关推荐
AI深度赋能,易联众智能病历助手小易AI助力智慧医疗提质升级

作为易联众自主研发的专业化智慧医疗辅助平台,小易AI智能助手整合医学知识智能问答、结构化病历生成、智能化病历质控等核心能力,全面升级传统病历管理体系,构建覆盖诊疗全场景的智慧医疗...[详细]

破局海外垄断! 天贺电子高阶塑封设备国产替代,引爆产业历史级刚需

先进封装已经成为全球半导体产业竞争的新高地,而高阶塑封设备则是支撑先进封装发展的关键基础 。随着AI产业持续释放需求, 国产高阶塑封设备有望迎来历史性机遇。对于天贺电子来说,持续突...[详细]

同仁堂医养(2667.HK)正式上市  百惠担任联席账簿管理人及联席牵头经办人

2026年7月7日上午,北京同仁堂医养投资股份公司(以下简称 “同仁堂医养”),股票代码 2667.HK,每股定价5.5港元,在香港联合交易所主板正式挂牌交易。百惠金控在本次发行中担任联席账簿管...[详细]

返回顶部