标签:tag1
CVPR 2024|仅用合成数据训练模型到底行不行?有新发现!
摘要:在机器学习领域,合成数据的使用越来越受到重视,尤其是在需要大量数据训练模型的场景中。最近的研究显示,使用合成数据训练的自监督和多模态模型在多...
图解大模型训练之:数据并行(DP、DDP、ZeRO、零冗余优化)
在大规模模型训练场景中,数据并行技术是提升计算效率的关键方法之一。文章首先介绍了流水线并行的概念,指出其在实际应用中并不广泛,主要受限于模型切割的...
专注AI+制造:创新奇智大模型工业落地初显成效,探索工业智能机器人新方向
摘要:机器之心报道指出,大模型行业正处在变革的前夜,OpenAI的一系列行动预示着风向的变化。在技术覆盖数字可观的同时,对行业的“颠覆”尚未完全显现。科技...
全球3.5亿下载量破纪录! Llama家族暴涨10倍,开源帝国掀AI革命
Llama模型自诞生一年半以来,已经成为开源界的领军者,全球下载量接近3.5亿,是去年同期的10倍。这一成就得益于其在Hugging Face平台的广泛传播。Groq公司创...
实践教程|PyTorch与torch-xla的桥接
极市导读:文章从XLATensor开始的溯源、注册PyTorch库实现、从PyTorch调用到torch_xla三个方面来介绍PyTorch与torch-xla的桥接。前言:XLA (Accelerated Line...
谷歌推世界首个AI游戏引擎,2000亿游戏产业恐颠覆!0代码生成游戏,老黄预言成真
摘要:极市导读:谷歌研究者开发的GameNGen,作为世界上首个完全由AI驱动的游戏引擎,能够以每秒20帧的速度实时生成逼真的DOOM游戏画面,这一技术突破预示着...
IJCAI 2024|首个视频人脸修复技术!让人脸细节更清晰!
极市导读:PGTFormer是首个专门为视频人脸恢复设计的方法,采用端到端的设计,摒弃了传统方法中的复杂对齐步骤,实现了更加高效和连贯的视频人脸恢复。方法介...
跨越AGI,Ilya官宣创业!我要的是「核安全」,SSI剑指安全超级智能
Ilya Sutskever,OpenAI的联合创始人之一,宣布离开并创建了新公司SSI(Safe Superintelligence Inc),专注于开发安全的超级智能。这一消息在社交媒体上迅速...
谷歌2小时疯狂复仇,终极杀器硬刚GPT-4o!Gemini颠覆搜索,视频AI震破Sora
摘要:谷歌在I/O 2024大会上发布了多项更新,包括Gemini 1.5 Pro、Project Astra和文生视频模型Veo等。Gemini 1.5 Pro的上下文长度达到200万token,远超其他...
快速提升性能,如何更好地使用GPU(下)
摘要:本文主要探讨了在GPU成本上升和供应短缺的背景下,如何提升GPU性能的方法。文章首先提到,可以通过将所有任务提交给GPU的异步工作队列(stream)来提升...