还记得钢铁侠托尼·史塔克的智能助手贾维斯吗?它能听懂托尼的每一句话,能思考、会观察,可以自主操控整座斯塔克大厦。不知道这是多少人曾经的梦想,青小蛙就一直想拥有一只贾维斯机器人。@Appinn
这一切,可能有头绪了!

Xiaomi Miloco 是米家的智能家居未来探索方案 Xiaomi Local Copilot,需要用户自托管使用。同时小米还发布了一款名为 Xiaomi-MiMo-VL-Miloco-7B-GGUF 的 7B 开源多模态大语言模型,它主要通过米家摄像头,识别用户的日常状态,比如打游戏、健身、看电视、阅读,并且能够读取常见手势,包括胜利、大拇指、OK 等等,然后通过米家联动其他设备。

另外,支持 Home Assistant。

目前 Xiaomi Miloco 的模型已经可以在 huggingface 下载,代码托管在 GitHub,授权协议是 Xiaomi Miloco License Agreement,授权作品的所有权及知识产权均归小米所有。
小米在此授予您一项个人的、有限的、非排他的、不可转让的、不可转授权的、免费的权利,仅限于您为非商业性目的使用Xiaomi Miloco项目而复制、使用、修改、分发授权作品。
可以实现:
青小蛙觉得,有这种彩虹屁,就值了!
目前仅支持 Windows(wsl)、Linux,需要 NVIDIA 显卡以及 Docker 部署。
具体为:
安装脚本:
bash -c "$(wget -qO- https://xiaomi-miloco.cnbj1.mi-fds.com/xiaomi-miloco/install.sh)"
Xiaomi Miloco 作为视觉信息来源,主要用来识别画面,主要用来启动工作流,其他的设备具体操作,还是需要配置工作流来实现:


目前,有三个已经可以使用的 MCP 服务:
贾维斯全写是“只是一个非常智能的系统”(Just A Rather Very Intelligent System) ,在漫威漫画电影《钢铁侠》中扮演一名可以理解人类语言,并且有自主思考能力的智能机器人。
Xiaomi Miloco 的存在,意味着未来家中的机器人,不一定非要是专用的机器人,一大堆的智能设备组合,也可以是机器人的一种形态。用户不再需要花费巨额成本去购买成品机器人,只需要让现有的智能设备接入 Xiaomi Miloco,让 Xiaomi Miloco 当贾维斯去控制这些设备就可以了。
青小蛙觉得很酷。
原文:https://www.appinn.com/xiaomi-miloco/