精彩回顾| “NVIDIA AI 研发技术开放日” 演讲视频全集!

2023年11月08日20:29:05 科技 1476

精彩回顾| “NVIDIA AI 研发技术开放日” 演讲视频全集! - 天天要闻

在全球 AI 产业生态体系日趋成熟的背景下,加速计算迎来了前所未有的发展空间,在众多不同应用以及各行各业得到了广泛应用,相关技术也飞速发展不断迭代。

10 月 22 日,在 NVIDIA AI 研发技术开放日上,共邀请了 10 位来自 NVIDIA 加速计算专家团队的讲师,深入互联网核心应用场景,聚焦五大技术热点,与大家分享了加速计算的优化经验。

演讲视频已正式上线,欢迎扫描下方二维码,观看精彩内容:

精彩回顾| “NVIDIA AI 研发技术开放日” 演讲视频全集! - 天天要闻


演讲一 GPU 编程和优化 – 最佳实践分享

演讲嘉宾:NVIDIA 加速计算专家 刘冰 & 郑鹏

演讲简介:

  • CUDA 编程基础知识和 CUDA 优化技术
  • 基于 FlashAttention2 与 FlashAttention 的 CUDA 编程最佳实践


演讲二 在 NVIDIA NeMo 中实现大语言模型全周期开发 – 以 LLaMa2 为例

演讲嘉宾:NVIDIA 加速计算专家 姚鑫 & 颜子杰

演讲简介:

  • NeMo Framework 介绍
  • 使用 Nemo Framework 进行预训练,包括优化策略和性能
  • 微调:包括 SFT 和 PEFT
  • RLHF:包括 RLHF 的训练与性能优化算法
  • 介绍如何将模型导出到 TensorRT-LLM


演讲三 TensorRT Hackathon 2023 总结 AIGC 及大语言模型推理的典型案例深入解析

演讲嘉宾:NVIDIA 加速计算专家 季光 & 陈庾

演讲简介:

  • TensorRT Hackathon 2023 总结:TensorRT Hackathon 是 NVIDIA 组织的年度编程赛事。我们回顾今年的赛事情况,包括赛题、比赛的组织与结果,并欢迎更多开发者参加比赛。
  • 通过 TensorRT-LLM 中的量化技术加速 LLM 推理


演讲四 向量数据库的加速策略和实战

演讲嘉宾:NVIDIA 加速计算专家 王雍 & 张静蓉

演讲简介:

  • 介绍 Vector DB 的核心引擎近似最近邻(ANN)搜索
  • RAPIDS-RAFT 库中基于 GPU 的 ANN 并行算法和工具,包括:IVF-Flat、IVF-PQ、基于图的方法等
  • ANN 算法中使用的关键优化技术,特别是并行 Top-K 算法


演讲五 推荐系统的最新优化策略和实践 – 以 HPS 为例

演讲嘉宾:NVIDIA 加速计算专家 魏英灿 & 王泽寰

演讲简介:

  • 用于推荐系统推理加速的分级参数服务器(HPS)框架介绍
  • 高性能 GPU 推理缓存的设计思路与实现细节
  • HPS 与 GPU 推理缓存的性能评估

科技分类资讯推荐

长安与东风重组新进展:朱华荣称不会改变长安既定战略 - 天天要闻

长安与东风重组新进展:朱华荣称不会改变长安既定战略

2月9日,长安汽车和东风集团股份(00489.HK)同步发布了控股股东“正在与其他国资央企集团筹划重组事项”的信息。长安汽车的控股股东是兵装集团,而东风集团股份的控股股东是东风公司。随即,长安汽车和东风集团这两家汽车央企将合并重组,成为业内关注的焦点。
公安部出手了!年龄限制放宽10年、送考下乡,2025年考驾照不难了 - 天天要闻

公安部出手了!年龄限制放宽10年、送考下乡,2025年考驾照不难了

电动车加强管理以后,要求机动车类型的车辆需要持证上路,但是老年人考驾照却受阻,一方面有年龄的限制,另一方面偏远山区考驾照不方便,所以在2025年公安部出手了,年龄限制放宽10年,同时推出送考下乡服务,还进一步的降低考驾照的费用,2025年起考摩托车驾照不难了。
从“星灵安全守护体系”到昊铂HL,看懂广汽科技日 - 天天要闻

从“星灵安全守护体系”到昊铂HL,看懂广汽科技日

发布会以技术切入,并全程围绕安全展开。广汽集团董事长、总经理冯兴亚率先登场,宣布2025年四季度将正式上市支持L3级智能驾驶的车型,他同时强调面向自动驾驶时代对智能驾驶技术、整车安全架构以及突发风险处理能力的要求更高。如何才能满足更高的要求?冯兴亚提到了“广汽
关税大棒下,最受伤的车企出现了 - 天天要闻

关税大棒下,最受伤的车企出现了

特朗普的关税大棒刚挥出,尚未吓退“外敌”,却先刺痛了自己。近日,拥有玛莎拉蒂、Jeep等14个品牌的全球第四大车企斯泰兰蒂斯突然宣布裁撤900名美国工人,关闭加拿大和墨西哥两家工厂,北美生产线陷入瘫痪。几乎同一时间,捷豹路虎宣布暂停对美出口一个月,奥迪更是直接