# NVIDIA TensorRT Edge-LLM 在 Jetson AGX Thor 上以 6.4 倍速度完成 MLPerf Edge Agentic 基准测试

- 来源：NVIDIA Technical Blog：Agentic AI / Generative AI
- 发布时间：2026-09-17 04:39
- AIHOT 分数：39
- AIHOT 链接：https://aihot.news/items/cmu4kdfem0u3bro4wtsmrgz4v
- 原文链接：https://developer.nvidia.com/blog/tensorrt-edge-llm-completes-the-mlperf-edge-agentic-benchmark-6-4x-faster-on-jetson-agx-thor

## AI 摘要

NVIDIA TensorRT Edge-LLM 在单台 Jetson AGX Thor 开发者套件上运行 Qwen3.6-27B，以 52.33 tokens/s 完成 MLPerf Inference v6.1 Edge Agentic 全部 1,007 轮性能负载，耗时 24 分 36 秒，比 llama.cpp 参考提交的 2 小时 37 分钟快 6.4 倍。

## 正文

按该来源的展示范围，站内仅提供摘要。

> 站内仅提供摘要，全文见原文。