Xiaomi Miloco 2.0：小米开源的本地全屋AI智能体，自带家庭记忆与视觉主动联动

一、Xiaomi Miloco 2.0是什么

Xiaomi Miloco 2.0 是小米公司最新开源的本地全屋AI智能体，以自研MiMo多模态大模型为核心大脑，依托米家摄像头完成全屋视觉、音频全模态感知，通过OpenClaw智能体插件标准化封装，实现从传统智能家居固定规则被动执行升级为自主推理主动服务的家庭AI管家，所有图像、家庭行为、设备数据本地边缘计算处理，不上传第三方云端，兼顾隐私安全与全屋自动化能力。

项目定位面向米家生态用户、智能家居开发者、本地AI爱好者开放，仅允许非商用二次开发，依托四层分层架构打通米家全品类IoT设备，同时兼容Home Assistant第三方智能家居中枢，解决多品牌设备孤岛、传统自动化配置繁琐、家居无自主感知能力三大行业痛点。

二、功能特色

1. 自主推理主动智能，无需预设联动规则

摒弃传统智能家居“条件+动作”固定脚本，内置居家通用安全常识库，大模型实时解析家庭场景自动生成联动逻辑。无需手动编写自动化，系统可自主感知环境、人员状态，主动调整设备、发出提醒、处置居家风险。

2. 家庭记忆AI系统（行业原生配套）

独家家庭长期记忆模块，自动记录每位家庭成员作息、灯光、空调、影音偏好、用药、作息习惯；每日凌晨自动沉淀行为规律，针对不同身份推送个性化服务。例如识别用户加班晚归，自动调至舒适室温、音箱推送关怀语音。

3. 多模态身份识别，区分家庭成员

融合人脸+体态双识别方案，精准区分老人、成人、儿童；支持自动识别新增家庭成员并建立独立档案，不同人员触发差异化设备策略，儿童靠近危险物品、老人长时间倒地会分级预警联动设备避险。

4. OpenClaw跨平台一键部署插件

Miloco 2.0封装为标准化Agent插件，原生接入OpenClaw框架，Windows、macOS、Linux三系统一行命令完成部署，大幅降低前代Docker部署的操作门槛，适配家用电脑、Mac mini、NAS等边缘硬件长期7×24小时运行。

5. 全屋米家IoT深度打通，兼容第三方中枢

原生适配米家全品类智能灯具、空调、窗帘、插座、影音、传感器、摄像头；支持小爱音箱消息推送、米家App通知同步；通过MCP协议对接Home Assistant，兼容第三方品牌智能设备实现跨生态联动。

6. 本地全链路隐私保护

全量视觉画面、家庭行为数据本地算力处理，无强制云端上传；支持用户手动数据隔离、本地记忆一键清空，关闭摄像头即可暂停全部视觉感知，杜绝居家隐私外泄风险，断网状态下所有自动化逻辑正常运行。

7. 家庭任务中心管理

支持单次、每日重复、长期持续三类家庭任务，自动追踪执行进度，包含服药提醒、儿童观影时长管控、门窗巡检、家电定时维护等场景，超时未完成联动音箱、手机推送多级提醒。

三、技术细节

（一）四层分层技术架构

1. 用户交互层：内置Web可视化管理面板，提供设备状态、家庭记忆、自动化日志、模型配置可视化操作；预留App对接扩展接口。

2. 应用决策层（核心Agent）：MiMo多模态大模型推理中枢，集成场景规划、身份识别、记忆调度、风险判定四大子模块，接收感知数据输出设备控制指令。

3. 能力平台层：统一感知接入、IoT设备控制、空间建模、本地存储、多模态视觉解析底层能力，封装标准化MCP通信协议。

4. 硬件算力层：兼容NVIDIA GPU、x86通用CPU，负责本地模型推理、视频流实时解码、数据本地持久化存储。

（二）核心模型与推理技术

内置自研 MiMo-VL-Miloco-7B 端侧视觉语言大模型，专为居家场景轻量化优化，支持视频帧实时语义理解、物体识别、人体动作解析；采用llama.cpp底层推理加速，降低GPU显存占用，响应延迟控制在毫秒级。

（三）部署底层依赖与通信协议

• 容器环境：Docker 20.10+，NVIDIA CUDA驱动、NVIDIA容器工具包；OpenClaw插件模式无需完整容器配置。

• 通信协议：米家IoT私有协议、MCP跨设备标准协议、HTTP/WS WebUI交互协议。

• 编程语言：主体业务Python 56.7%，Web前端JavaScript 27.4%，配套Shell脚本、C++底层推理优化代码。

（四）官方软硬件部署标准

硬件最低&推荐配置

软件系统支持

Windows11（WSL2）、Ubuntu22.04 LTS、macOS 13+；暂不支持ARM架构原生运行；需提供MiMo大模型API Key（小米官方模型免费试用Token）。

四、应用场景

1. 个性化居家服务场景
   系统记忆用户作息，早间自动开窗、开启温水模式；夜间归家自动调节灯光色温、空调温度；观影时段关闭多余照明、拉合窗帘，无需手动设置场景。

2. 居家安全风险主动预警场景
   摄像头识别儿童触碰刀具、插座，音箱实时警示并关闭周边电源；检测老人长时间倒地无动作，同步推送告警至手机并联动全屋灯光高亮；夜间门窗未关定时提醒。

3. 老人、儿童看护场景
   根据家庭档案定时播报吃药提醒；限制儿童电视、平板使用时长，超时自动断电并推送家长通知；识别独居老人长期无活动状态触发关怀提醒。

4. 跨品牌全屋设备自动化场景
   米家灯具、空调搭配Home Assistant接入的第三方窗帘、扫地机器人，AI根据室外光照、温湿度自动协同联动，无需多平台分别配置。

5. 离线本地隐私敏感场景
   租房、母婴家庭、居家办公用户，不希望家庭画面上传云端；Miloco 2.0本地运算，关闭网络依然完整运行自动化，保护居家影像隐私。

6. 开发者二次开发场景
   智能家居开发者基于开源代码扩展自定义AI任务、新增第三方设备驱动；硬件玩家搭建本地私有AI家庭中枢，深度定制专属全屋智能逻辑。

五、使用方法

方式一：OpenClaw插件一键部署（推荐，2.0新增）

1. 本地电脑安装OpenClaw基础运行框架，完成环境依赖校验；

2. 执行官方单行部署命令拉取Xiaomi Miloco 2.0插件；

3. Web管理面板登录小米账号，同步绑定全屋米家智能设备；

4. 填入MiMo多模态模型API密钥，完成本地模型初始化；

5. 添加米家摄像头作为视觉感知源，系统自动识别家庭成员并建立家庭档案；

6. 无需配置规则，等待AI自动采集1-3天家庭行为数据，即可启用主动智能服务。

方式二：Docker容器完整部署（兼容1.0旧流程）

1. 克隆GitHub源码仓库至本地设备；

2. 安装Docker、NVIDIA CUDA配套工具；

3. 执行仓库内置一键部署Shell脚本，自动构建镜像；

4. 访问本地WebUI地址，完成账号、摄像头、模型配置；

5. 开启7×24小时后台常驻运行，自动生成居家自动化策略。

日常基础操作

1. Web面板查看实时摄像头画面、设备在线状态、家庭记忆档案；

2. 手动新增家庭成员、编辑个性化设备偏好；

3. 查看风险预警日志、自动化执行记录；

4. 一键清空本地所有家庭记忆数据、临时关闭视觉感知。

六、竞品对比

选取Home Assistant（HA）、LocalAI、Xiaomi Miloco 2.0三款主流开源本地智能方案对比，表格清晰区分核心差异：

七、常见问题解答

Q1：Xiaomi Miloco 2.0是否可以商用开发？

A：根据GitHub开源协议，项目仅允许个人非商用使用，未经小米官方书面授权，禁止基于本项目开发付费服务、商用智能家居软硬件产品、对外提供公共AI家居服务。

Q2：没有NVIDIA独立显卡，能否正常运行Miloco 2.0？

A：最低运行必须搭载NVIDIA RTX30系列及以上显卡，纯CPU运行会出现模型推理卡顿、摄像头画面解析延迟严重，无法稳定实现实时场景识别，不推荐无GPU设备部署。

Q3：家中没有米家摄像头，还能使用全部功能吗？

A：不能。Miloco 2.0核心感知入口为米家摄像头，缺少摄像头将失去身份识别、场景风险判断、家庭记忆采集核心能力，仅能实现基础设备语音控制，主动智能功能全部失效。

Q4：Miloco 2.0断网之后还能正常工作吗？

A：本地自动化、视觉识别、设备联动全部断网可用；仅MiMo大模型API密钥依赖网络调用，离线后无法新增复杂AI推理逻辑，已生成的居家记忆与联动策略不受断网影响。

Q5：能否接入华为、苹果HomeKit等非米家智能设备？

A：支持间接兼容，通过内置MCP协议对接Home Assistant中枢，再由HA接入其他品牌设备；原生仅深度适配米家设备，第三方设备联动流畅度低于原生米家硬件。

Q6：本地存储的家庭影像、行为数据会上传小米服务器吗？

A：不会，所有摄像头视频流、家庭成员行为记忆、设备操作日志全部在本地硬件存储运算，无强制云端上传流程；用户可随时在Web面板一键清空全部本地隐私数据。

Q7：macOS设备部署Miloco 2.0有什么限制？

A：支持macOS13及以上系统，依托OpenClaw插件部署，仅NVIDIA显卡机型可完整运行模型；苹果M系列芯片无CUDA驱动，无法提供GPU加速，运行性能较差，不推荐M芯片Mac作为主算力设备。

Q8：Miloco 2.0 1.0版本项目能否直接升级到2.0？

A：不能，2.0底层架构完全重构，接入OpenClaw框架，与1.0 Docker部署体系不兼容，需重新拉取2.0源码/插件，无法平滑升级。

八、相关链接

• GitHub仓库地址：https://github.com/XiaoMi/xiaomi-miloco

九、总结

Xiaomi Miloco 2.0是小米面向全屋本地AI赛道推出的完整开源解决方案，依托自研MiMo多模态大模型与OpenClaw插件化架构，补齐传统智能家居缺少自主感知、家庭记忆、主动服务的短板，深度打通米家IoT生态并兼顾第三方设备兼容，完整实现居家视觉数据本地处理保障隐私安全，兼顾普通米家用户轻量化部署需求与开发者二次开发拓展空间，是目前针对米家生态优化最完善的本地AI全屋智能开源工具。