精彩回顾| “NVIDIA AI 研发技术开放日” 演讲视频全集!

2023年11月08日20:29:05 科技 1476

精彩回顾| “NVIDIA AI 研发技术开放日” 演讲视频全集! - 天天要闻

在全球 AI 产业生态体系日趋成熟的背景下,加速计算迎来了前所未有的发展空间,在众多不同应用以及各行各业得到了广泛应用,相关技术也飞速发展不断迭代。

10 月 22 日,在 NVIDIA AI 研发技术开放日上,共邀请了 10 位来自 NVIDIA 加速计算专家团队的讲师,深入互联网核心应用场景,聚焦五大技术热点,与大家分享了加速计算的优化经验。

演讲视频已正式上线,欢迎扫描下方二维码,观看精彩内容:

精彩回顾| “NVIDIA AI 研发技术开放日” 演讲视频全集! - 天天要闻


演讲一 GPU 编程和优化 – 最佳实践分享

演讲嘉宾:NVIDIA 加速计算专家 刘冰 & 郑鹏

演讲简介:

  • CUDA 编程基础知识和 CUDA 优化技术
  • 基于 FlashAttention2 与 FlashAttention 的 CUDA 编程最佳实践


演讲二 在 NVIDIA NeMo 中实现大语言模型全周期开发 – 以 LLaMa2 为例

演讲嘉宾:NVIDIA 加速计算专家 姚鑫 & 颜子杰

演讲简介:

  • NeMo Framework 介绍
  • 使用 Nemo Framework 进行预训练,包括优化策略和性能
  • 微调:包括 SFT 和 PEFT
  • RLHF:包括 RLHF 的训练与性能优化算法
  • 介绍如何将模型导出到 TensorRT-LLM


演讲三 TensorRT Hackathon 2023 总结 AIGC 及大语言模型推理的典型案例深入解析

演讲嘉宾:NVIDIA 加速计算专家 季光 & 陈庾

演讲简介:

  • TensorRT Hackathon 2023 总结:TensorRT Hackathon 是 NVIDIA 组织的年度编程赛事。我们回顾今年的赛事情况,包括赛题、比赛的组织与结果,并欢迎更多开发者参加比赛。
  • 通过 TensorRT-LLM 中的量化技术加速 LLM 推理


演讲四 向量数据库的加速策略和实战

演讲嘉宾:NVIDIA 加速计算专家 王雍 & 张静蓉

演讲简介:

  • 介绍 Vector DB 的核心引擎近似最近邻(ANN)搜索
  • RAPIDS-RAFT 库中基于 GPU 的 ANN 并行算法和工具,包括:IVF-Flat、IVF-PQ、基于图的方法等
  • ANN 算法中使用的关键优化技术,特别是并行 Top-K 算法


演讲五 推荐系统的最新优化策略和实践 – 以 HPS 为例

演讲嘉宾:NVIDIA 加速计算专家 魏英灿 & 王泽寰

演讲简介:

  • 用于推荐系统推理加速的分级参数服务器(HPS)框架介绍
  • 高性能 GPU 推理缓存的设计思路与实现细节
  • HPS 与 GPU 推理缓存的性能评估

科技分类资讯推荐

上观伴考季分秒赢好礼 - 天天要闻

上观伴考季分秒赢好礼

6月6日、6月7日、6月8日“上观伴考季,分秒赢好礼”活动获奖结果已经出炉。以下为每日分享用户中随机抽取的5名幸运用户,以及每日(0点-24点)在App内在线时长排名前30名的用户。奖品分别为价值200元的上观新闻周边礼盒、50元话费充值卡
广州赤兔商务信息:商务领域的智慧领航者 - 天天要闻

广州赤兔商务信息:商务领域的智慧领航者

在广州这座充满活力与机遇的商业之都,广州赤兔商务信息有限公司宛如一匹矫健的赤兔马,以其敏锐的商业洞察力、专业的服务能力和高效的执行效率,在商务信息服务领域一路驰骋,成为众多企业信赖的合作伙伴。公司拥有一支由资深市场分析师、行业专家和数据挖掘高手组成的专业团队,他们凭借丰富的经验和深厚的专业知识,深入...
辅信推出 XPC nano NE10N 迷你电脑,搭载英特尔 N100 处理器 - 天天要闻

辅信推出 XPC nano NE10N 迷你电脑,搭载英特尔 N100 处理器

IT之家 6 月 9 日消息,辅信 Shuttle 推出新款迷你主机 XPC nano NE10N,搭载英特尔 N100 处理器,支持壁挂和连接最多两台 4K / 60Hz 显示器。XPC nano NE10N 尺寸为 135×115×41.3mm,提供准系统版本(不含内存与硬盘),配备单个 SO-DIMM 插槽,最高支持 16GB DDR4-3200 内存
魅族 PANDAER 联名联想拯救者 Y9000P 至尊版 / R9000P 上架 - 天天要闻

魅族 PANDAER 联名联想拯救者 Y9000P 至尊版 / R9000P 上架

IT之家 6 月 9 日消息,魅族 PANDAER 与联想合作推出的拯救者 Y9000P 至尊版 / R9000P AI 元启白金独角兽限定电竞本现已上架魅族商城,可以看作是系列笔记本入门 / 中配款型换上“灵龙限定涂装”,IT之家整理具体价格如下:Y9000P 至尊版(Ultra 9 275HX + 32GB RAM + 1TB + RTX 5070Ti)
GPD MicroPC 2 官宣:单核性能秒一代 MicroPC,净重 490 克 - 天天要闻

GPD MicroPC 2 官宣:单核性能秒一代 MicroPC,净重 490 克

IT之家 6 月 9 日消息,GPD 曾在 2019 年推出 MicroPC 产品,后续在 2021 年将 N4100 处理器更新到 N4120,已经有 6 年没有真正的迭代产品发布。GPD 官方今日宣布,即将推出 MicroPC 2,继承了上一代的小巧便携低功耗的设计,屏幕由 6 英寸提升到 7 英寸,但整机仅比一代重约 50 克,净重 490 克。▲ 左
一彬科技获得客户项目定点 预计总销售金额2.56亿元 - 天天要闻

一彬科技获得客户项目定点 预计总销售金额2.56亿元

智通财经APP讯,一彬科技(001278.SZ)发布公告,公司近期收到国内新能源车企(限于保密协议,无法披露其名称,以下简称“客户”)的项目定点通知书,定点产品主要为仪表板总成汽车零部件相关产品。此次定点项目生命周期5年,预计全生命周期总销售金额约为人民币2.56亿元。...