2024-12-22 09:51 点击次数:94
作家:赵雨荷
开首:硬AI
英伟达周二推出了一款名为Jetson Orin Nano Super的生成式AI超等筹划机。英伟达CEO黄仁勋示意,这款开荒者套件通过软件升级杀青了更高性能和更廉价钱,仅售249好意思元,尺寸工致,可放在手掌中,可将生成式AI性能提高高达1.7倍。
该公司示意,这款居品适合营业AI开荒者、爱好者和学生,与其前代居品比拟,其生成式AI推感性能普及了1.7倍,性能提高了70%,每秒不错施行高达67万亿次的INT8运算(67 INT8 TOPS),内存带宽也普及了50%,达到了102GB/s。
黄仁勋还有益为这款居品录制了一段视频,如同2021年发布Hopper H100时同样,展现英伟达对这款居品的喜爱。在视频中,黄仁勋示意,从Xavier运转,英伟达就创造了一种新的处理器,也等于机器东说念主处理器,那时没东说念主知说念他们在作念什么。
新的Jetson Orin Nano Super领有快要70兆次的运算智力,功率25瓦,价钱249好意思元,不错施行HGX的通盘功能,甚而是施行空话语模子。
他示意,岂论是创建基于检索增强生成(Retrieval-Augmented Generation, RAG)的大型话语模子(LLM)聊天机器东说念主,构建视觉AI代理,依然部署基于AI的机器东说念主,Jetson Orin Nano Super王人是理思的采取,这款套件王人能以更低的本钱提供重大的运算效率,主要由于居品撑捏低功耗联想,能以7瓦到25瓦的功耗运行,适合多样角落建造云算场景,岂论是智能城市、智能农业依然机器东说念主开荒。
捏续普及的性能和体验通过软件更新,哈福优配Jetson Orin Nano Super也将为已有Jetson Orin Nano开荒者套件的用户普及生成式AI性能。
黄仁勋示意,Jetson Orin Nano Super十分适合那些但愿在生成式AI、机器东说念主时代或筹划机视觉畛域发展妙技的东说念主士。在AI畛域从任务专用模子向基础模子振荡的趋势下,它也为开荒者提供了一个将创意变为本质的易用平台。
为生成式AI提供强盛性能Jetson Orin Nano Super性能增强,为通盘流行的生成式AI模子,举例Meta的LLaMA、阿里巴巴的通义千问以及谷歌的Gemma。这款套件基于Transformer的筹划机视觉模子带来了显赫普及,进一步普及效率推崇。
该公司示意,开荒者套件包括一个Jetson Orin Nano 8GB 系统模块(SoM)和一个参考载板,为角落建造AI哄骗的原型联想提供了理思平台。
系统模块摄取NVIDIA Ampere架构GPU,配备张量筹划中枢(Tensor Cores)和6核 Arm CPU,或者处理多个并行AI哄骗管说念,并提供高性能推明智力。此外,它还撑捏最多四个录像头,隔离率和帧率均高于前代版块。
英伟达强调,跟着AI时代清静从云霄走向末端,实体AI将是下一波发展重心,Jetson Orin Nano Super不仅不错用于开荒聊天机器东说念主,也适合简历视觉AI代理或部署AI机器东说念主等哄骗。
平日的生成式AI软件生态系统与社区此外,英伟达Jetson AI实验室提供对最新开源社区模子的撑捏,以及易于使用的教程。开荒者还不错从更平日的Jetson社区取得撑捏,并从其他开荒者的样式中取得灵感。
Jetson撑捏英伟达的AI软件,包括用于机器东说念主时代的NVIDIA Isaac、用于视觉AI的NVIDIA Metropolis和用于传感器处理的NVIDIA Holoscan。通过NVIDIA Omniverse Replicator生成合成数据,以及使用NVIDIA TAO器用包微调来自NGC目次的预检修AI模子,开荒时期不错大幅缩小。
Jetson生态系统勾合资伴提供格外的AI和系统软件、开荒器用以及定制软件开荒处事。他们还提供与录像头稀奇他传感器关联的撑捏,以及载板和居品处理有野心的联想处事。
为通盘Jetson Orin用户解锁性能普及:Super形状英伟达也秘书将为Jetson Orin NX和Nano系列的系统模块提供软件更新,让它们也能享受到Super形状的性能普及,最高可达70%。这些更新将通过Jetpack SDK管制器发布在英伟达网站和GitHub上。
Jetson Orin Nano Super Developer Kit预测很快就贯通过大家经销商运转供货。关于思要初学AI开荒的学生、工程师或创客来说,这款开荒套件提供了一个经济实惠且功能重大的平台采取。
英伟达将Jetson Orin Nano Super Developer Kit定位为鼓励生成式AI时代普及化的关节居品,但愿在智能交通、零卖管制以及物联网(IoT)哄骗中大放异彩。
本文来自微信公众号“硬AI”,饶恕更多AI前沿资讯请移步这里
风险领导及免责要求 阛阓有风险,投资需严慎。本文不组成个东说念主投资提出,也未酌量到个别用户特殊的投资野心、财务景象或需要。用户应试虑本文中的任何看法、不雅点或论断是否适应其特定景象。据此投资,株连自夸。