硬件与部署 硬件选择

消费者级硬件应可用于模型训练

[原帖提出要能在消费级硬件上训练模型,评论者们从不同角度展开讨论,包括训练的可行性、相关项目、硬件发展等,观点有支持有反对且争议较多]

 ·  · 
硬件与部署 其他

4080 16GB与旧3070 8GB对比

[围绕4080 16gb和3070 8gb展开的电脑硬件相关讨论,涉及成本、性能、温度、再利用等多方面,有不同观点交流,整体氛围较为平和]

 ·  · 
硬件与部署 其他

拥有4倍H100服务器免费访问权限后的规划

[围绕一台4x H100服务器在只运行基准测试的情况下如何利用展开讨论,提出众多建议包括出租、微调模型、训练新模型等,还涉及一些相关技术话题,整体氛围积极且充满创意]

 ·  · 
硬件与部署 其他

以类似ChatGPT速度运行Llama 3.x 8B类模型的最便宜方式

[围绕以类似ChatGPT速度运行Llama 3.x 8B类模型的最便宜方式展开讨论,涉及不同硬件设备、量化级别、软件环境等多方面因素]

 ·  · 
硬件与部署 性能优化

笔记本电脑大语言模型性能 - 注意电源设置!

[原帖分享笔记本电脑大语言模型性能受电源设置影响,评论涉及Windows系统风险、其他性能优化方式、不同系统下的模型使用情况等内容,整体讨论氛围比较理性]

 ·  · 
硬件与部署 其他

特斯拉P40显卡起火爆炸,寻求帮助

[原帖作者讲述Tesla P40显卡着火爆炸经历,网友围绕爆炸原因、是否维修、保险索赔、eBay交易风险以及后续信任问题展开讨论]

 ·  · 
硬件与部署 其他

韩国AI芯片DEEPX NPU:价格低于50美元,是否优于GPU?

[围绕韩国DEEPX NPU AI芯片价格低于50美元且性能是否优于GPU展开讨论,多数观点表示质疑,少数表示惊叹]

 ·  · 
硬件与部署 其他

NVIDIA RTX 5090:人工智能与多GPU的限量供应与限制

[围绕NVIDIA RTX 5090的供应限制、性能限制等情况展开讨论,涉及美国对中国的禁运、中国竞争、垄断质疑等多方面,同时标题党问题也受到较多关注,整体氛围热烈且观点多样]

 ·  · 
硬件与部署 其他

GPU为何不能像PC内存一样有可插拔内存

[围绕GPU为何没有像PC内存那样可扩展内存展开讨论,从技术、成本、商业等多方面阐述原因,讨论氛围较理性且具有一定深度]

 ·  · 
硬件与部署 硬件选择

二手3090显卡价格涨至850 - 900美元

[原帖询问3090二手价格上涨后是否仍值得购买,评论围绕3090价格波动原因、是否等待5090、拜登政策对价格影响、不同地区价格差异、显卡的AI训练价值等多方面展开讨论,整体氛围热烈且争议较多]

 ·  ·