基于强化学习的 AI 端侧智能构图辅助系统
构妙 LiveCompose 致力于让每一位普通用户都能轻松拍出专业级构图照片。不同于传统相机的静态九宫格辅助线,我们通过 AI 实时分析取景画面,结合设备陀螺仪实现物理级追踪引导,主动"告诉"用户如何移动手机以获得最佳构图,并在对齐完美构图时自动拍摄。
| 项目 | 说明 |
|---|---|
| LiveCompose | RL 模型训练、知识蒸馏、CoreML 部署 |
| LiveCapture | iOS APP 源码 |
- 模型架构: ResNet50 Backbone + Actor-Critic (PPO)
- 美学评分: NIMA / GAIC 双评分器驱动奖励信号
- 数据构建: BLIP + Stable Diffusion Inpaint 双模型工作流
- 端侧部署: 知识蒸馏 (MobileNetV3-Small) → CoreML → iOS
- 应用框架: SwiftUI + AVFoundation + CoreMotion + CoreML
- 实时动态引导:AI 分析画面,可视化移动指引
- 传感器融合追踪:陀螺仪 + 磁性吸附,物理级流畅追踪
- 美学评分驱动:NIMA/GAIC 模型确保构图专业性
- 闭环体验:检测 → 追踪 → 引导 → 拍摄,全流程自动化
- 端侧高效推理:蒸馏后的轻量模型在 iOS 设备上实时运行
预训练模型权重、训练数据集及 Demo 托管在 Hugging Face:
iOS App: 构妙 LiveCapture — 已上架 App Store
构妙 LiveCompose — 让每一次快门,都定格最美的瞬间.