AI在线 AI在线

RWKV

RWKV7-G1 1.5B全球语言推理模型发布 支持100多种自然语言

RWKV7-G1 1.5B全球语言推理模型发布 支持100多种自然语言
4月29日，RWKV基金会宣布开源发布了RWKV7-G11.5B推理模型，这是一款具备强大推理能力和多语言支持的模型，特别适合在端侧设备（如手机）上运行。 该模型基于World v3.5数据集训练，包含小说、网页、数学、代码和推理数据，总数据量达到5.16T tokens。 RWKV7-G11.5B模型在推理逻辑性方面表现出色，能够完成多语言、数学和代码任务。
4/30/2025 9:01:00 AM
AI在线
无注意力大模型Eagle7B：基于RWKV，推理成本降低10-100 倍

无注意力大模型Eagle7B：基于RWKV，推理成本降低10-100 倍
Eagle 7B 可将推理成本降低 10-100 倍。在 AI 赛道中，与动辄上千亿参数的模型相比，最近，小模型开始受到大家的青睐。比如法国 AI 初创公司发布的 Mistral-7B 模型，其在每个基准测试中，都优于 Llama 2 13B，并且在代码、数学和推理方面也优于 LLaMA 1 34B。与大模型相比，小模型具有很多优点，比如对算力的要求低、可在端侧运行等。近日，又有一个新的语言模型出现了，即 7.52B 参数 Eagle 7B，来自开源非盈利组织 RWKV，其具有以下特点：基于 RWKV-v5 架构构
2/1/2024 2:37:00 PM
机器之心
  • 1