3000亿参数大模型
蚂蚁集团发布两款创新 MoE 大模型,训练成本大幅降低
近日,蚂蚁集团的 Ling 团队在预印版 Arxiv 平台上发布了题为《每一个 FLOP 都至关重要:无需高级 GPU 即可扩展3000亿参数混合专家 LING 大模型》的技术论文,介绍了他们研发的两款新型大语言模型:百灵轻量版(Ling-Lite)和百灵增强版(Ling-Plus)。 这两款模型在设计上采用了多项创新,能够在低性能硬件上高效训练,显著降低了成本。 百灵轻量版的参数规模为168亿,其中激活参数为27.5亿。
3/24/2025 3:28:00 PM
AI在线
- 1
资讯热榜
Google 不慎泄露 Gemini CLI 开源即将推出文章,现已404
AI Hacker Rises to Power! XBOW's Autonomous AI Tool Dominates HackerOne, Revealing Thousands of Vulnerabilities and Intimidating the Cybersecurity Industry
OpenAI搜索连接器重磅上线!解锁ChatGPT全新工作效率神器
苹果iOS 26升级:图乐园功能焕然一新,AI 生成图像更真实!
我国首个发电行业大模型“擎源”发布,模型参数达千亿级别
你绝对没见过的折纸ASMR视频!极致解压+深度元提示词
Clikka AI颠覆产品摄影!一张图秒变专业级大片,省钱又吸睛
Hengbot 推出 Sirius 机器狗:集成 OpenAI,可跳舞、踢足球
标签云
人工智能
AI
OpenAI
AIGC
模型
ChatGPT
DeepSeek
AI绘画
谷歌
数据
机器人
大模型
Midjourney
用户
智能
开源
微软
Meta
GPT
学习
图像
技术
Gemini
AI创作
马斯克
论文
Anthropic
代码
英伟达
算法
Stable Diffusion
芯片
训练
开发者
智能体
生成式
蛋白质
腾讯
苹果
神经网络
3D
研究
生成
Claude
机器学习
计算
Sora
LLM
AI设计
AI for Science
AI视频
AI新词
GPU
人形机器人
华为
百度
搜索
xAI
大语言模型
场景
Agent
字节跳动
预测
深度学习
伟达
Transformer
工具
大型语言模型
视觉
RAG
神器推荐
模态
具身智能
文本
Copilot
LLaMA
算力
驾驶
API
架构