| Tesla V100-DGXS-32GB 这张卡能用来跑 ollama 或者 vllm 不? idblife • 2024 年 9 月 25 日 • 最后回复来自 woscaizi | 2 |
| 本地跑 sd 和 local llm 推理, 什么显卡性价比最高? cinlen • 2024 年 7 月 1 日 • 最后回复来自 crackidz | 38 |
| 分享一下自己训练的大模型 Azure99 • 2025 年 1 月 9 日 • 最后回复来自 ibox163 | 54 |
| 求推荐能同时链接 chatgpt 和 ollama 的 webui qweruiop • 2024 年 7 月 18 日 • 最后回复来自 kangfenmao | 3 |
| 有什么高性价比的开源大模型体验和生产部署服务? wencan • 2024 年 6 月 11 日 • 最后回复来自 bkdlee | 7 |
| 支持不同显存显卡的推理加速框架 whyorwhynot • 2024 年 5 月 30 日 • 最后回复来自 whyorwhynot | 4 |
| 使用 llama3:70b 本地化部署, 100 人左右的并发,大概需要多少块 4090 才能满足? leeum • 2024 年 7 月 9 日 • 最后回复来自 keakon | 52 |
| 现在买 3090TI 玩 AI 靠谱吗 Tuatara • 2024 年 5 月 24 日 • 最后回复来自 glouhao | 91 |
| 请教各位,开源的 AI 模型需要什么样配置的机器?比如图像类啊大语言模型啊语音类啊都想玩玩 fushall • 2024 年 5 月 16 日 • 最后回复来自 AlexHsu | 14 |
| 大佬们,求助本地部署大模型 jjyyryxdxhpyy • 2024 年 12 月 12 日 • 最后回复来自 skykk1op | 39 |
| 折腾 Llama3 跑在 NAS...结果确实一言难尽 CoffeeLeak • 2024 年 5 月 4 日 • 最后回复来自 lchynn | 6 |
| llama 3 发布了,我感觉挺猛的... t41372 • 2024 年 7 月 24 日 • 最后回复来自 kangfenmao | 12 |
| ollama run 报错请教大佬 xmtpw • 2024 年 8 月 21 日 • 最后回复来自 finalsatan | 4 |
| 对 Llama-3-8B 模型在指令跟随方面的测试。 smalltong02 • 2024 年 4 月 30 日 • 最后回复来自 qinfengge | 16 |
| electron 有没有办法集成开源 AI 模型? superliwei • 2024 年 4 月 29 日 • 最后回复来自 jones2000 | 19 |
| 目前最快的模型, 微软 Phi-3 zsxzy • 2024 年 4 月 26 日 • 最后回复来自 xudong | 2 |
| 感谢巨硬, Phi-3 Mini 让我八年前的破笔记本也能玩本地大模型翻译了 iX8NEGGn • 2024 年 4 月 26 日 • 最后回复来自 SuperMaxine | 13 |
| 有啥好的开源分类工具或者模型供学习? kite16x • 2024 年 4 月 26 日 • 最后回复来自 kite16x | 4 |
| 想离线运行下大模型玩玩,现在还能搞到 4090 么? sunfly • 2024 年 4 月 10 日 • 最后回复来自 doruison | 29 |