xAI 正式开源 Grok-1:3140 亿参数 MoE 模型架构与权重公开
xAI 宣布开源其最新研发的 Grok-1 模型,该模型拥有 3140 亿参数,采用 Mixture-of-Experts (MoE) 架构。Grok-1 的发布标志着 xAI 在…
智客 ZICQ 每日整理大模型、开源基础设施与开发者现场的 AI 新闻与深度文章。
投稿技术文章当前筛选: 分类: 开源AI 清除筛选
xAI 宣布开源其最新研发的 Grok-1 模型,该模型拥有 3140 亿参数,采用 Mixture-of-Experts (MoE) 架构。Grok-1 的发布标志着 xAI 在…
开源AI· 2024-02-29
EleutherAI发布《基础模型开发速查表》(FM Dev Cheatsheet),旨在为新晋开发者提供全面的工具和资源指南,涵盖从数据收集到模型发布的完整开发周期。该速查表由E…
开源AI· 2023-07-08
EleutherAI推出了一款名为Minetester的开源强化学习(RL)环境,该环境基于开源体素引擎Minetest构建,旨在解决现有RL框架如MineRL的局限性问题。Min…
开源AI· 2023-05-23
EleutherAI联合Hugging Face和Stability AI,对Safetensors库进行了外部安全审计,结果显示该库在安全性方面表现优异,并计划将其作为默认的模型…
开源AI· 2023-03-02
EleutherAI发布第二年度回顾,详细介绍了过去一年半在开源AI领域的进展,包括GPT-NeoX-20B等重要模型的发布、28篇论文的发表以及多个开源代码库的推出。此外,Ele…
开源AI· 2021-06-02
EleutherAI宣布开源其类GPT-3的大型语言模型,旨在推动AI安全研究并降低技术获取门槛。该组织认为,开源模型能够促进对大模型潜在风险和能力的深入研究,帮助低资源研究者参与…
开源AI· 2020-11-19
Hugging Face发布了Kornia可微数据增强(DDA)模块,该模块利用Kornia的可微计算机视觉解决方案,旨在将数据增强(DA)流程与现有PyTorch组件(如自动微分…
开源AI· 2019-10-09
Hugging Face于2019年10月9日开源了Transformers库,这是一个基于统一API设计的先进Transformer架构库,旨在为更广泛的机器学习社区提供最先进的…