硬件与部署 硬件选择

GH-200超级服务器首启:革命性硬件助力AI开发

Reddit 用户分享了他们对于 GH-200 Super Chip 服务器的使用体验和观点,主要围绕其性能、硬件配置、软件支持以及在实际应用中的表现展开讨论。

 ·  · 
硬件与部署 硬件选择

60GB显存Ziptie主机2400欧元配置曝光

讨论围绕60GB VRAM的Ziptie电脑配置展开,涉及性能、优化建议、散热问题及不同硬件配置的优劣,总体氛围技术性强且互动活跃。

 ·  · 
硬件与部署 硬件选择

AMD新APU性能逼近7600 XT,共享96GB VRAM

讨论围绕AMD Strix Halo APU的性能、内存配置、价格及其在机器学习和AI应用中的表现,重点关注ROCm支持、内存分配和性价比问题,情感倾向复杂,既有期待也有批评。

 ·  · 
硬件与部署 硬件选择

48GB显存最佳AI模型推荐

本讨论主要围绕48GB VRAM的最佳模型选择和应用展开,涉及模型性能、优化方法、硬件配置、散热方案、成本效益等多个方面。

 ·  · 
硬件与部署 硬件选择

出售AI工作站,有意者请联系

讨论围绕出售高性能AI设备展开,涉及电源供应、价格、财务限制、云服务与自托管的优劣等多个方面,总体氛围偏向技术探讨和经济考量。

 ·  · 
硬件与部署 硬件选择

AMD新CPU推荐:9950x是否过度配置?

讨论围绕在拥有192 GB DDR5内存和RTX 3090显卡的情况下,选择合适的AMD CPU展开,主要关注内存控制器、性能瓶颈和大型语言模型的处理能力,同时涉及Intel和AMD的比较,以及硬件投资和散热问题。

 ·  · 
硬件与部署 硬件选择

NVIDIA Jetson AGX Thor 将在2025年拥有128GB的VRAM!

原贴链接 详细内容: 标题:NVIDIA Jetson AGX Thor 将于 2025 年拥有 128GB VRAM,引发 Reddit 热议 近日,Reddit 上一则关于 NVIDIA Jetson AGX Thor 的讨论引起了广泛关注。该帖指出 NVIDIA Jetson AGX Thor 将在 2025 年拥有 128GB 的 VRAM,此帖获得了众多点赞和大量评论。讨论主要围绕着该产品的性能、价格、适用场景以及与其他竞品的比较等方面展开。 在讨论中,有人认为它具有共享内存,可运行 LLMs 和训练小模型,拥有 ARM64 CPUs,预计价格在 2-3 千美元,功耗在 50-100W 之间,且不能运行游戏。有人对其高 VRAM 和低功耗的性价比表示怀疑,也有人提到当前版本的 Orin 是 64GB,还有人关注其与市场上类似价格范围的 GPU(如 RTX 4090)相比的性能。 有人指出幻灯片显示该产品的 GPU 性能是 Orin 的 8 倍,IO 带宽是 10 倍,有人期待它能配备更快的内存,也有人认为共享内存的 LPDDR 性能会令人失望,尤其是对于 LLMs 来说。有人提到其在推理方面可能较慢,更适合用于嵌入式系统部署边缘推理。 有用户分享道:“作为一名 NVIDIA Inception 成员,AGX Orin 64GB 的价格约为 1793 欧元(不含增值税)。”还有用户表示,如果用于推理,需要快速的内存而不是大量的计算。 ...

 ·  · 
硬件与部署 硬件选择

64GB显存的双MI100服务器

讨论围绕一台配备64GB VRAM的AMD MI100 AI服务器展开,涉及硬件配置、性能测试、散热问题及软件选择,展示了高性能计算的复杂性和多样性。

 ·  · 
硬件与部署 硬件选择

展示你的AI设备!

讨论围绕AI硬件配置展开,涉及显卡选择、性能优化、双GPU运行策略及硬件展示,总体氛围技术导向且实用。

 ·  · 
硬件与部署 硬件选择

寻找:AMD LLM t/s 性能图表/基准测试

讨论围绕AMD显卡在大型语言模型(LLM)性能测试中的表现,涉及多GPU支持、ROCm兼容性及不同模型的性能比较。

 ·  ·