千元本地智能管家:洋垃圾 P100 / P40 攒一台家庭 AI 大脑

投稿人:站长(投稿者)|投稿日 2026-11-10

投稿者实测以下价格与 tok/s 均为投稿者本人的账,本站未复现、不背书。

以前总觉得智能管家、本地 AI 那套东西离普通人特别远:要么买成品几千上万,要么各种云端会员年年掏钱,数据还全跑在别人的服务器上,心里不踏实。

后来我一直在琢磨:家里想有一台能听懂人话、管全屋设备、断网也能用的本地管家,为什么不直接捡洋垃圾自己攒?不追求全新配件,优先堆显存,够用就行。

前后算了两套配置,全部闲鱼、拼多多淘二手,账目实打实算,不虚标,大家可以直接照着抄。

跑的模型(投稿口径)35B 量化 MoE(投稿未指明具体型号)
机器洋垃圾 X99 主机 · P100 16G → P40 24G
来源性质投稿者实测(非本站实测)
投稿日 / 编辑日2026-11-10 / 2026-11-10

两套配置跑的都是一台 35B 量化 MoE 模型——具体型号与推理框架投稿未指明,按站内规矩不猜、不映射到站内模型库。以下 tok/s 全部是投稿者本人机器跑出的实测值(投稿实测),非本站实测,本站未复现。

第一套:入门版(P100 16G)

预算紧,先把整套系统跑通、把家庭管家搭起来。

配件(闲鱼 / 拼多多二手)价格(元)
X99 DDR3 主板200
洋垃圾 E5 处理器100
32G DDR3 REG ECC 内存250
2011 接口风冷50
特斯拉 P100 16G 显卡500 多,600 元不到
GT710 亮机卡(P100 无视频输出,画面要另插亮机卡)70 左右(20 买不到)
二手 500W 电源 + 机箱风扇180 左右(投稿者未核实,为价格区间)
硬盘沿用家里旧固态,无额外开销
整套合计约 1400(1350–1450,配件价加总)

这套跑 35B 量化 MoE 模型没问题,但要有一部分权重卸载到内存里,短上下文大约 20 tok/s。日常控制灯光、窗帘、简单场景联动完全够用——先实现「家里有个本地脑子」。

▸ 编辑注:投稿原稿整套「1200 出头」,与单件价格加总(约 1300)不一致;作者随后修正两处价格(亮机卡 20→70 左右、P100「500 左右」→「500 多,600 元不到」),按配件加总重算为本口径。

第二套:进阶版(P40 24G)

想把体验再往上提一档,显卡直接换 P40。

配件(闲鱼 / 拼多多二手)价格(元)
X99 主板200
E5 处理器100
32G DDR3 内存(想更充裕,加 150 上 64G)250(64G 为 400)
风冷50
亮机卡70 左右
特斯拉 P40 24G(闲鱼,改好散热导风罩的成色较好的)1100 左右
二手 600W 电源100
机箱风扇100
整套合计32G 版约 1970(约 2000);64G 版约 2120(两千出头)

24G 显存的优势出来了:35B 模型完整塞进显存,不用往内存里卸。短上下文基础 29 tok/s;开投机解码峰值能摸到 50 tok/s,对话流畅很多,还能开长上下文——机器记得你之前说的话。

提醒:P40 是被动散热矿卡,买回来一定要搞好风道(加风扇/换导风罩),不然分分钟降频。

▸ 编辑补充(已核实):Tesla P40 没有任何视频输出口——HDMI、DP、DVI 全都没有(NVIDIA 官方产品规格书),所以亮机卡是画面输出的必备项,不是闲钱项;P100 同样无输出口。

▸ 编辑注:投稿原稿 32G 版「整套差不多 1920」是修正前总价;按亮机卡 70 左右重算为约 1970,本口径。

速度(投稿实测)

配置tok/s
第一套 P100 16G约 20 tok/s(部分权重卸载到内存,短上下文)
第二套 P40 24G29 tok/s(完整驻留显存,短上下文);开投机解码 50 tok/s(投稿者实测峰值);还能开长上下文

tok/s 为投稿者本机实测(投稿口径),非本站实测;不同量化档 / 上下文长度 / 框架下数字会变,这里只记录投稿给出的条件。

这台管家能干什么

一、随便说话,不用死记指令

不用生硬喊「打开客厅灯」,可以说「有点闷」「准备睡觉了」「客厅别太亮」——模型自己理解意图,再去控制灯光、空调、窗帘。

二、主动照顾家里人

搭配人体、门窗传感器,实现无感智能:晚上起夜自动亮微弱地脚灯,出门忘关门窗主动语音提醒,老人长时间没活动及时告警。漏水、烟雾这类险情本地直接响应,不等云服务器转发。

三、纯本地的家庭备忘录

买菜清单、吃药提醒、第二天日程,全存在自己机器上。聊完一轮还能让它复述一遍,所有隐私数据不上传到任何厂家。

四、打通新老家电

米家、Zigbee 设备,还是老式红外空调、老电视,统一一个管家调度,不用挨个 APP 切换。

五、断网不受影响

网线拔掉也能用:语音唤醒、灯光自动化、安防告警,所有核心功能本地运行,不会云端一断就摆烂。

六、进阶版 P40 顺带当私人 AI 工具

不控制家电的时候,还能拿它写文案、给孩子出题、总结长文档。把家电说明书、家里资料做成知识库,直接问就有答案。以后预算够了再加一块 P40,显存叠到 48G,还能跑更大的模型。

搭建顺序建议(投稿者原话整理)

  1. 别一上来就囤一堆传感器:先点亮主机,装好 Home Assistant。
  2. 接入一盏灯、一个人体传感器,把语音 + 大模型全链路跑通,确认指令能正常执行。
  3. 确认无误后再慢慢添加各类设备,一步步扩充。
编辑部说明:本案例为站长本人投稿的实机方案(2026-11-10):价格为二手市场自购实价,tok/s 为其本机实测。编辑部未复现数字;其中三处价格由投稿者本人修正(P100「500 多、600 元不到」/亮机卡「70 左右,20 买不到」/电源+风扇「180 左右,未核实」),总价随修正重算。二手价格波动大,作量级参考、不作购买建议;本站不跑卡、不做导购、不放购买链接。

相关页面

显卡:Tesla P100 16G→显卡:Tesla P40 24G→实测(本站真机 tok/s)→模型优化(工具与 Agent 精选)→
这条内容有帮助吗?