请教智能家居与 AI 的相关思路，以实现接近 J.A.R.V.I.S

家里在装修，了解了一些智能家居方案，感觉都不是心目里理想的“智能家居”，感觉更像是联动。有感于此，提出一些想法，欢迎大家告诉我相关实现的思路、AI 模型，我愿意重新学习、训练。

具备输入、输出能力 a. 输入：传感器信息输入、人声音(自然语言)输入、网络信息输入(采集) 1. 视觉采集：人脸识别，能感知人员信息、人员数量，是否有物体移动。 2. 可穿戴设备：手环、手表、手机，获得状态，房间位置。 3. 物理传感器：能感知光照度，温度、湿度、声音音量、空气质量，水、天然气。 4. 自然语言识别：类似 Siri 、小爱同学。 5. 获取基于当前房屋位置的网络信息，如天气、附近新闻。 b. 输出：控制继电器开关（可以借助第三方交互设备），语音输出 1. 控制单个开关，输出 0/1 的能力。 2. 联动控制多个开关（线性）。 3. 语音输出（音响）。

具备推测、自主联想（非真实、有限的联想） a. 基于物理传感器推测所需动作，例如温度过低时控制空调、光照不足/充足时控制窗帘。 b. 基于网络信息：例如：天气预报下雨时，提醒带伞，控制窗户闭合。 c. 基于视觉采集：推测进入住宅的人员信息，主人、爱人、朋友、老人、危险人。 d. 基于多次学习推测人员习惯：当主人每天 10 点手动打开客厅灯后，重复一定次数后，每天自动打开客厅灯。 e. 具备学习能力(基于房屋内信息，非网络学习)。

安全性 a. 具备脱离实时网络运行的能力

charlestang

2023-11-01 17:44:20 +08:00

此前我折腾过一些所谓的智能家居。后来我安装了小米空调伴侣，小米万能遥控器，小米网关，单火智能开关，还有一个 WiFi 继电器。都是比较实用的，只是简单的通过网络控制（语音）而已，并没什么智能。如果说有智能，就是通过小爱音箱，将语音转换成命令。

在使用的过程中，我充分意识到一个点。就是有时候智能并不重要。我不需要我的家有多聪明，或者这些电器多么自动。一个意想不到的是，我需要他们极其可靠。例如，“小爱同学”，尴尬 5 秒，“在，请问……”，“打开客厅空调”，尴尬 3 秒，“客厅空调已经打开了”。

在小爱同学延迟的那几秒，体验是无限差劲的，你不知道是不是家用 Wifi 又卡住，还是网络问题，还是小爱 Wifi 掉线了，还是空调伴侣 Wifi 掉线了，毕竟家用设备，其可靠性就这么点。当你要完成一个动作，将多个可靠性只有 95% 的东西串联，你得到的是一个可靠性 80% 不到的东西。

我从没像现在这样觉得软件的可靠性如此重要。比如我做了一个用手机控制自动打开楼门的继电器。20 次里有一次失败，我发现我还是不敢完全不带钥匙。

antkites

2023-11-05 21:59:11 +08:00

不脱离实时网络运行，可以把设备接入物联网平台，通过 API 接口拿到实时数据，发送给模型，由模型自动判断何时该调用外部 API 接口实现设备控制。

这方面可以看看前段时间发布的阿里云百炼平台，像是 ChatGPT API 也有类似的实现外部 API 接口调用的功能吧。

如果是离线运行，可以了解下 LangChain 。