天猫精灵大模型终端OS开启内测！智能家居+ChatGPT还有什么新花样？
注意，ChatGPT已接管你家的空气。
先别慌，这里指的是：ChatGPT被用于控制室内温度、湿度、空气质量等参数情况。
该信息来自智能暖通空调控制器厂商Sensibo，与知名物联网播客IOT PODCAST近期一次对谈，节目中，Sensibo分享了他们应用ChatGPT的情况。
在这家智能家居公司手里，ChatGPT不只是一个对话bot，而是与房间内空调热泵共同联网，对空气各种参数进行控制，甚至，它还能获取并分析用户家里及公司数据。
该公司CEO对ChatGPT颇为看好，甚至将其比作2006年AWS首次出售自己的弹性计算（EC2）服务，该事件在IT圈意义重大，是云计算行业的标志性事件之一。
巧的是，就在今天（7月5日），36氪曝出，天猫精灵启动内测业内首个大模型终端操作系统，在天猫精灵APP内测页面上，显示有知识探索、共情互动、生活妙招、灵感启发四类建议对话场景。
综合此前信息，接入大模型大概率是通义千问。此举亦可视为AI大模型结合智能家居方向的发力。
与此同时，ChatGPT被网站流量监测服务商Similarweb发现——其6月访问量可能出现环比负增长。
时下，AI在大众领域引发的狂热似乎正在退却，而在智能家居这种细分领域的落地正被圈内关注——
有什么新实例值得关注？国内生成式AI在智慧家居应用发展怎么样？
一起来看看。
ChatGPT+HVAC=？
要想理解ChatGPT这回的应用价值，先了解Sensibo所专注的业务。
据CEO Ran Roth介绍，他们所做的领域名叫暖通空调（HVAC）控制器。对比寻常空调，暖通空调不仅能调节温度，更能控制空气湿度及质量，保持通风。
由于近些年双碳成为全球主议题，节能环保也是HVAC所追求的一大指标。
Sensibo旗下产品是一系列的空调控制器，适配上千种空调产品，包括美的、海尔、格力等国产品牌。
它能通过室内Wi-Fi与手机和Pad相连，再通过“配对”，充当空调遥控器，从而实现对室内空调系统的远程控制管理。
温度湿度之外，Sensibo还会监测PM2.5和有害物质等参数，如若空气质量变差，控制器会将空调切换至通风模式。
图注：其设备能实时监测您家中最常见的空气污染物，并保留其发现的历史记录。
节能是Sensibo对外宣传并吸引客户购买的一大价值点。在对外发布的产品介绍中，他们称，其产品内置的智能传感算法能帮助用户节省高达40%的水电费。
关于同ChatGPT的结合，Sensibo的说法是——
他们一开始将会将ChatGPT同硬件终端语音助手结合起来，参考用户使用空调习惯，提出建议并落地，比如在特定时间点自动对空调进行调整。
除此之外，Sensibo还允许AI监控传感器数据，进而控制空调及热泵装置，节省能源消耗。
其首席运营官对外表示：“由于每天HVAC系统将会进行120万次数据操作，AI生成信息也将被进一步优化，这样就能进一步节约能源”。
对于ChatGPT在智慧家居乃至物联网领域的应用，该公司CEO表示十分乐观，他打比方道：
“AWS出现前，如果你想开一家软件公司你必须买一堆服务器，还要雇一堆人日夜维护，这对小公司很难做到，但当云计算出现，创业公司很快能做出一个软件并部署上去，SaaS企业也才有相应机遇。”
ChatGPT与智能家居结合走到哪了？
自诞生以来，ChatGPT与智能家居结合就是顺理成章之事，从时间节点和模型看，可以划分为3个阶段。
1.0阶段：ChatGPT结合智能家居语音助手，进行对话。最典型应用就是将AI接入智能音箱，赋予终端前所未有的理解能力，而非“小X，小X音箱”连喊十遍。
2.0阶段：赋予GPT更多权限，令其能直接控制智能家居及电器，甚至生成控制条件，在特定情况下，无需人类指令就进行自动化操作，提供舒适的居家体验。
3.0阶段：智能家居专属大模型，对各种场景有更好的匹配能力，配合正火的Matter协议，迈向真正的全屋智能。
前两个阶段，均可视为通用大语言模型与智能家居的“粗暴”结合，随着大模型飞入千行百业各个场景，大概率会诞生垂类专属大模型，并与智能家居更好结合，融入产业。
那么目前AI大模型+智能家居走到哪里了？
从公开案例看，大部分案例仍属2.0阶段。
此次官宣为暖通空调接入ChatGPT的Sensibo就是其中一个典型。
亚马逊近期在2.0方向上也颇为努力。根据5月一份遭曝光文件显示，该公司正在构建全新模型，挽救此前一年损失高达100亿美金的Alexa智能语音助理。根据亚马逊的说法，该模型会更加“通用”，更“有能力”。
智能家居行业当然少不了网友整活，在近几个月很多人分享了五彩斑斓的应用落地，同属2.0水平。
一位网友就分享了自己用GPT控制灯光颜色的例子。
他会确定好灯光主色调，还有就寝时间、工作时间、季节等条件，将种种要求提供给ChatGPT再将其与Home Assistant接通，于是，AI自行调整室内灯光组合。
且GitHub上也已经有Home Assistant与ChatGPT集成的项目，发布时间约为今年3月。
另一个案例来自Josh.ai，这是一家语音控制智能家居团队，他们在今年2月分享了将ChatGPT接入智能终端，从而实现——更好的“察言观色”能力，比如根据户主当前活动状态，自动控制窗帘打开。
前两天，Josh.ai还官宣一个全新的大模型，JoshGPT。科技媒体zdnet将其称为首个基于GPT的AI智能家居平台。
据官方称，它使用了GPT同款技术，能回答Siri、Alexa 和 Google等智能家居助手无法回答具体的问题，提供更多细节。
不过在官网给出的案例中，JoshGPT所谓支持的多轮问答，以及厨艺艺术旅行方面的回复能力似乎与ChatGPT并无明显差异。
国内玩家在该领域探索步履不一。
其中，涂鸦智能于3月官宣了整合类ChatGPT技术而成的智能应用Demo。据悉，该团队采取提示词工程（Prompt Engineering）方法，引入ChatGPT语言处理能力，结合自身AI模型，带来更加高效和智能的体验。
全屋智能公司欧瑞博也于近期官宣，已将其智能家居中控屏与ChatGPT进行了对接。
美的在AI大模型方面相对克制，在近期一次发布活动上，美的集团全屋智能负责人尚喆表示：“（美的）核心定位不是把ChatGPT或者底层模型发明出来，这不是我们的分工。”
作为物联网+互联网大厂，小米集团AI实验室主任王斌博士之前曾向财经媒体深燃透露：小米自己会去自研通用大模型，但不会单独发布一款类ChatGPT产品。另有消息显示，小米AI领域相关人员已超过1200人。
至于智能家居方面的应用，小米方面的说法是——“大模型至少能在交互能力上，提高智能家居的使用体验”。
开头提及，天猫精灵近期同样有动作，7月5日，36氪报道了天猫精灵启动内测业内首个大模型终端操作系统。当用户获得内测资格、同意协议后在线完成固件升级，几十秒之后，天猫精灵的声音、语调和内容生成就都发生显著变化。
据36氪称，这是业内第一次通过线上升级，将智能硬件操作系统完全变革为大模型驱动。
综上，尽管目前大模型+智能家居整体仍处于2.0阶段，但不可否认，该层面可延展创新的空间仍然很大。
举例而言，目前GPT系列插件喷涌而出，若能结合智能家居，那房间灯光、空气质量条件还能参考网上信息，这又是全新的体验与可能性。
但必须提醒的是，还有一部分人对ChatGPT乃至大语言模型结合智能家居应用持谨慎态度。
背后原因在于大语言模型不可避免地会产生胡说八道（hallucination）问题，若与智能家居进一步整合，生成指令可能造成错乱，甚至威胁居住者人身安全。因而，错误指令能否立即终止执行纠正，是业内应该关注的问题。
除此之外，大模型接入越来越多智能家居终端后，可能引发更为严重的黑客侵入问题，同样是行业良性发展需要正视的问题。
写在最后
值得补充的是，谷歌尽管在对话AI竞争中，风头被OpenAI及旗下ChatGPT盖过，但他们还发布了一个名为PaLM-E的项目。
该项目将谷歌的PaLM大语言模型与ViT（基于Transformer的视觉模型）结合，并部署到机器人上，于是，该机器人能够帮助人类找东西，甚至在办公室清垃圾，面对物体新特征也有很好的泛化能力。
一旦家中有个机器人，试想一下，下一代智能家居体验，又何必依靠智能家居？而此前占主流的观点——“智能音响即智能家居入口”，亦可能被颠覆。
谷歌之外，Meta也在探索新多模态模型ImageBind，以求将文本、温度、图像/视频、深度、声音等模特信息实现“大一统”。
不同模态融合技术的发展，无疑对于传感器类型五花八门的物联网行业，同样起着推动作用。
综上来看，无论大模型在机器人上部署还是多模态“大一统”，都可视为智能家居加上“物超人”奇点已过——
过去智慧家居不够智慧的状况，很快将被彻底改变。
关于ChatGPT及大语言模型在智能家居方面的应用，智次方・物联网智库还将继续保持关注——
如有任何相关线索及一手信息，欢迎联系资深编辑，微信：Ada_Li0322。