我電腦32Gb Ram 跑到30B qwen 既deepseek

@——@v

4 回覆
0 Like 7 Dislike
@——@v 2025-01-29 12:40:05
雖然慢但係跑得郁

好奇,d人有graphic card 都係跑8B model都係話慢

其實係咪唔夠VRAM就會用左ram
拖慢



(window 跑wls2 要改少少config先用到更多ram)
@——@v 2025-01-30 02:41:49
CPU: 16 Core (Ryzen 5900HX)
GPU: N/A
RAM: 32GB

Model:
Deepseek r1 Qwen

Token per second
30B: 2
14B: 4.5
7B: 9
1.5B: 37

用黎比大家參考MINI PC 既速度
GoldenSaber 2025-01-30 02:57:46
30b用q幾
springlala 2025-01-30 10:32:00
pi5 1.5B 9 token/s
吹水台自選台熱 門最 新手機台時事台政事台World體育台娛樂台動漫台Apps台遊戲台影視台講故台健康台感情台家庭台潮流台美容台上班台財經台房屋台飲食台旅遊台學術台校園台汽車台音樂台創意台硬件台電器台攝影台玩具台寵物台軟件台活動台電訊台直播台站務台黑 洞