ArXiv发布LeVJEPA：无需启发式方法的高效可扩展视频预训练模型

摘要：ArXiv发布了一种新型视频预训练模型LeVJEPA，该模型通过消除传统启发式方法，显著提升了视频处理的效率和可扩展性。LeVJEPA采用了一种无崩溃目标的训练方法，通过全局和局部视图的不变性损失以及SIGReg正则化技术，避免了表示崩溃问题。与现有方法相比，LeVJEPA在相同数据量和计算量下，训练速度提高了5.6到20.8倍，同时在ImageNet-1K上的表现超出最强基线模型7.6个百分点。此外，该模型支持块因果注意力机制，进一步提升了时间序列建模能力。

---

核心突破

LeVJEPA是一种新型视频预训练模型，旨在通过消除传统启发式方法，提升视频处理的效率和可扩展性。以下是其主要技术亮点：

• 无崩溃目标训练：LeVJEPA采用了一种无崩溃目标的训练方法，通过全局和局部视图的不变性损失以及SIGReg正则化技术，避免了表示崩溃问题。这种方法简化了模型架构，仅需一个编码器和一个投影器，并减少了对复杂规则和人工干预的依赖。

• 高效训练机制：通过均匀随机令牌丢弃技术，LeVJEPA显著减少了编码器观察到的令牌数量，从而降低了预训练的计算成本。同时，这种方法还提升了下游任务的准确性。

• 块因果注意力机制：由于无需分支之间的不对称性，LeVJEPA可以采用块因果注意力机制进行训练，而不会显著影响准确性。这使得时间排序成为编码器本身的属性，进一步提升了时间序列建模能力。

实验结果

在相同数据量和计算量下，LeVJEPA的训练速度比现有方法提高了5.6到20.8倍。在ImageNet-1K上的表现超出最强基线模型7.6个百分点，同时在以运动为中心的基准测试中保持竞争力。此外，与计算量匹配的DINOv2相比，LeVJEPA在外观中心评估中接近预训练图像编码器的性能，同时将其运动中心准确性提高了一倍。

行业影响

LeVJEPA的发布标志着视频预训练领域的一个重要突破。其高效的训练机制和强大的性能表现，使其成为处理大规模视频数据的理想选择，特别是在视频理解、生成和编辑等领域具有广泛的应用前景。此外，该模型的无启发式方法也为AI模型的训练提供了新的思路，有助于推动AI技术的进一步发展。

开发者建议

• 关注模型应用场景：LeVJEPA特别适用于需要处理大规模视频数据的应用场景，如视频理解、生成和编辑等。开发者可以尝试将该模型应用于相关领域，以提升系统性能。

• 探索无启发式方法：LeVJEPA的无崩溃目标训练方法为AI模型的训练提供了新的思路。开发者可以探索类似的方法，以简化模型架构并提升训练效率。

• 关注后续研究：随着LeVJEPA的发布，预计会有更多相关研究跟进。开发者可以关注后续的研究成果，以获取更多技术灵感。

---

消息来源：ArXiv cs.AI (2026-08-27)

—— 完 ——

主题标签： #LeVJEPA #视频预训练 #高效训练 #无启发式方法 #SIGReg