On-App AI视频剪辑：多模型驱动的IPC事件抓拍与自动Vlog生成

---

IPC 精彩时刻功能，是涂鸦 AI 云开发者平台为所有带摄像头的智能硬件，专门打造的"AI 视频增值服务"：通过 AI 大模型自动识别预设的目标或自定义事件后，就能抓取摄像头中的精彩片段（如宠物卖萌互动、宝宝第一次走路、日出日落等），并一键生成带特效的专属 Vlog。能够满足婴儿/宠物看护、生活娱乐、风景旅行等全场景需求，帮助用户轻松记录生活中的高光时刻！

针对有视频处理需求的，涂鸦还提供了丰富的 AI 能力模板，它基于 On-App AI 所打造，将 AI 推理模型部署到 App 上，以"更灵活的 AI 架构、更优的用户体验、更安全的算力成本"为核心理念，帮助企业与开发者将先进的 AI 技术无缝集成到移动设备中。通过创新的技术架构和不断优化的 AI 推理模型，不仅能对视频主体部分进行自动突出，还能对视频隐私内容进行一键保护处理，免去大量的后期剪辑工作。

目前，涂鸦已合作国内先进合规的大模型，如 DeepSeek、通义千问、豆包等；海外则对接了 ChatGPT、Claude、Gemini 等顶尖的 AI 大模型，助力打造智商更高的 IPC 能力！

通过涂鸦 IPC 精彩时刻功能，各企业不仅能大大提高 App 的日活跃与用户粘性，而且搭配订阅制增值服务，还能轻松提升用户的 ARPU 值（即每用户平均收入），轻松实现低成本高毛利的商业化模式。该功能具体落地的场景化案例可参考如下：

• 母婴品牌商： 帮助无法时刻陪伴在身边、或抽不出空闲时间整理宝宝成长片段的家长，自动生成"宝宝每日精彩集锦"；
• 宠物医院： 针对铲屎官需要了解宠物日常行为记录的需求，该功能可以基于 AI 行为分析，以"周"为时间节点，自动剪辑合成"爱宠健康监管周报"视频；
• 物业公司： 可实时展示小区环境变化，并自动剪辑生成"园区四季景观延时视频"，打造更具吸引力的居住环境效果展示。

---

一、核心功能亮点

1、精准捕捉

涂鸦支持用户预设 IPC 所需捕捉的目标，如婴儿、猫、狗、鸟等；也可以自定义事件，如让智能 IPC 设备观察"门口人流量变化"、抓取"花盆开花的瞬间"等等。搭载强大的 AI 大模型，不仅能全天候抓捕关键画面，还支持定时抓拍设置（即在每天指定的时间点，实现自动抓拍）。

• 定时抓取： 适用于日出日落、花落花开等可以准确预测时间的用户场景；
• 智能固定标签： 包含"猫"、“狗”、“鸟”、"婴儿"等会灵活行动的对象，覆盖大家日常的泛娱乐化场景；
• 用户自定义场景事件： 支持用户主动输入想要 IPC 自动拍摄的场景，功能更灵活强大，适合有探索精神、并且有复杂场景需求的用户；

抓拍规则自定义界面

涂鸦支持 AI 自动生成 5-10 秒的短视频片段，并永久储存在云端，防止回忆的丢失。

云端相册展示

2、一键生成

• AI Vlog： 涂鸦支持自动合成指定时间内的精彩视频集锦，用户也可以快速预览该时间段内的历史视频集锦；

相册选择视频合成界面

• Moments 分享： 涂鸦搭建了视频集锦工坊，用户最多可勾选 5 个片段，并一键添加背景音乐、特效（如宠物放大、人物特写），秒变朋友圈点赞收割机；
• 操作超简单： 用户只需设置规则，AI 就能自动运转开干，小白也能玩转专业剪辑！

一键突出视频主体并进行隐私保护

3、零硬件成本

用户无需升级摄像头硬件，就能即时享受该功能：付费后，用户将涂鸦公版 App 或品牌 App 升级到 V6.6.0+ 版本即可自动开通，老设备也能秒变"智能神器"。

---

二、On-App AI 视频模板简化剪辑步骤

为了帮助用户提高视频剪辑效率，涂鸦在 IPC 精彩时刻功能中，专门提供了丰富的 AI 能力模板，支持用户对视频进行二次处理。目前主要包括：对视频主体进行 AI 突出、对视频隐私部分进行 AI 一键保护，后续涂鸦还会不断推出更强大的能力模板！

1、On-App AI 视频隐私保护模板

涂鸦视频隐私保护模板中，AI 识别能力得到了极大增强。用户上传相关视频后，音视频会解码出每一帧图像，AI 将从中精准识别移动或静止的视频主体，并自动对其进行画面突出，同时对其他区域图像采用毛玻璃或马赛克处理，操作简单、效率更高，用户能轻松上手。可广泛适用于检测&识别、电子围栏、安全监管、视频剪辑等品类设备的应用中。

比如，对居家环境中的小狗进行视频隐私保护处理后，最终效果：

处理前的视频截图

处理后的视频截图

2、On-App AI 视频主体突出模板

AI 视频主体突出模板，通过 AI 能力对画面进行实时的目标检测，自动定位、识别主体后，再利用图像算法对其进行智能自适应放大，使主体更突出、画面更聚焦。最后，对处理完成的视频进行编码与封装，即可输出经过优化的视频内容。

在户外复杂场景下，涂鸦 On-App AI 视频主体方案依然能够精准识别目标对象，并进行动作追踪和画面放大。

---

三、如何用该功能提高商业化价值？

1、可推广的目标群体

只要有 IPC 设备需求的用户，涂鸦 IPC 精彩时刻功能都可以进行拓展应用，如：

• 家庭用户： 有宝宝、宠物的家庭，爱记录生活的年轻人群
• 垂直行业： 母婴用品商、宠物服务商、安防集成商等
• 内容创作者： 需要短视频素材的 Vlog 博主、社区运营者

2、如何玩转商业化模式？

2.1 商业模式推荐

• 硬件+服务套餐： 摄像头新品支持捆绑"7 天免费试用"，可有效提高用户软件付费转化率；也可以作为购买硬件的附加福利进行 VIP 赠送，帮助提高硬件转化率；
• 节日营销： 春节期间推"家庭回忆年册"、宠物生日时自动推送"萌宠成长日记"；
• B 端合作： 与母婴品牌联名推出"宝宝成长日记"等专属服务，共享用户池；
• 更灵活的付费套餐： 支持按周/月/年收费，灵活匹配用户需求，例如：宠物店可推出"萌宠 VIP 套餐"。

2.2 涂鸦一站式赋能

• 从商品上架、营销推送（服务大厅弹窗、消息提醒等形式）到分润结算，涂鸦提供一站式全链路支持；
• 涂鸦将持续更新并提供完善的宣传素材包，包括：短视频 Demo、朋友圈海报模板，降低客户营销制作成本。

---

四、手把手开发接入介绍

1、开发 IPC 精彩时刻通用方案

1.1 前期准备

IPC 精彩时刻功能是在小程序上实现的，因此，开发者需先将与小程序绑定的涂鸦智能、智能生活 App 版本升级至 6.6.0 及以上，并填写相关信息申请开发权限：

https://service.console.tuya.com/8/3/list?source=support_center

1.2 开发模块能力

精彩时刻模块能力包含：服务详情设置、智能相册、全量相册、AI 编辑。

具体功能介绍、交互流程和开发路径：

https://t.tuya.com/AY1D3VnRON

2、开发 AI 能力模板

2.1 视频主体突出方案

AI 视频主体突出方案的模块能力开发，包含：视频资源导入/导出、获取本地音乐列表、试听背景音乐、AI 视频流处理功能。

手把手指导教程：

https://t.tuya.com/AY1D3VnRRh

2.2 视频隐私保护方案

AI 视频流隐私保护方案的模块能力开发，包含：视频主体突出、环境遮罩、视频流添加背景音乐、调节混音（视频原声、背景音乐）权重。

手把手指导教程：

https://t.tuya.com/AY1D3VnRb6

注意：视频流隐私保护 API 集成于 IPC 精彩时刻小程序模版，因此开发前，需同 IPC 精彩时刻的小程序版本保持一致性。

3、开发问题咨询

开发过程中，如遇到任何问题，欢迎登录涂鸦开发者技术论坛进行提问：

https://developer.tuya.com/cn/miniapp/solution-ai/ability/video-solution/aiVideoPrivacyProtection/overview