智客前沿 · 2024-03-25
EleutherAI澄清Yi-34B与Llama 2关系:架构相似性不代表依赖
EleutherAI发布了一篇博文,针对《纽约时报》关于Yi-34B模型依赖Meta的Llama 2的报道进行了事实核查。文章指出,Yi-34B与Llama 2的架构相似性源于现代大语言模型(LLM)普遍采用的基础技术,而非对Llama 2…
智客专题 开源旗舰专题
DeepSeek / Qwen / Llama / Mistral 等开源旗舰模型的技术解析、推理性能、部署实践与生态横评,覆盖权重、推理框架与下游微调。
· 2026年9月15日 #开源模型#开源AI#DeepSeek#Qwen#Llama#Mistral · 12 / 1602 篇内容
智客前沿 · 2024-03-25
EleutherAI发布了一篇博文,针对《纽约时报》关于Yi-34B模型依赖Meta的Llama 2的报道进行了事实核查。文章指出,Yi-34B与Llama 2的架构相似性源于现代大语言模型(LLM)普遍采用的基础技术,而非对Llama 2…
智客前沿 · 2024-03-19
Google Research与斯坦福医学院合作推出了SCIN(皮肤状况图像网络)数据集,旨在解决现有皮肤病图像数据集中普遍存在的种族和皮肤类型代表性不足问题。SCIN数据集包含超过10,000张来自不同皮肤类型和身体部位的皮肤病图像,重点…
智客前沿 · 2024-03-17
xAI 宣布开源其最新研发的 Grok-1 模型,该模型拥有 3140 亿参数,采用 Mixture-of-Experts (MoE) 架构。Grok-1 的发布标志着 xAI 在 AI 模型领域的重大进展,为研究人员和开发者提供了强大的工…
智客前沿 · 2024-02-29
EleutherAI发布《基础模型开发速查表》(FM Dev Cheatsheet),旨在为新晋开发者提供全面的工具和资源指南,涵盖从数据收集到模型发布的完整开发周期。该速查表由EleutherAI与MIT、AI2、Hugging Face…
智客前沿 · 2023-10-17
EleutherAI于2023年10月16日发布了Llemma,这是一系列专为数学推理设计的开放语言模型,包含70亿和340亿参数版本。Llemma基于Code Llama权重进行初始化,并在包含550亿个token的Proof-Pile …
智客前沿 · 2023-07-08
EleutherAI推出了一款名为Minetester的开源强化学习(RL)环境,该环境基于开源体素引擎Minetest构建,旨在解决现有RL框架如MineRL的局限性问题。Minetester具有完全透明的开源代码库、灵活的定制能力以及强…
智客前沿 · 2023-05-23
EleutherAI联合Hugging Face和Stability AI,对Safetensors库进行了外部安全审计,结果显示该库在安全性方面表现优异,并计划将其作为默认的模型存储格式。审计由Trail of Bits执行,未发现关键安…
智客前沿 · 2023-03-26
EleutherAI发布了一篇深度回顾文章,详细介绍了其过去一年半在大语言模型领域的进展,特别是GPT-NeoX-20B的研发历程。文章涵盖了从硬件短缺到模型训练优化、从技术挑战到社区互动等多个方面,展示了开源AI研究中的复杂性和创新性。G…
智客前沿 · 2023-03-02
EleutherAI发布第二年度回顾,详细介绍了过去一年半在开源AI领域的进展,包括GPT-NeoX-20B等重要模型的发布、28篇论文的发表以及多个开源代码库的推出。此外,EleutherAI还宣布成立非营利研究机构,吸纳超过20名全职研…
智客前沿 · 2021-06-02
EleutherAI宣布开源其类GPT-3的大型语言模型,旨在推动AI安全研究并降低技术获取门槛。该组织认为,开源模型能够促进对大模型潜在风险和能力的深入研究,帮助低资源研究者参与相关研究,并加速AI对齐技术的发展。EleutherAI强调…
智客前沿 · 2020-11-19
Hugging Face发布了Kornia可微数据增强(DDA)模块,该模块利用Kornia的可微计算机视觉解决方案,旨在将数据增强(DA)流程与现有PyTorch组件(如自动微分和优化器)无缝集成。该模块支持空间(2D)和体素(3D)张量…
智客前沿 · 2019-10-09
Hugging Face于2019年10月9日开源了Transformers库,这是一个基于统一API设计的先进Transformer架构库,旨在为更广泛的机器学习社区提供最先进的NLP模型和技术。该库不仅包含精心设计的预训练模型,还支持研…