核心技术 / TECHNOLOGY
感受当下 记得上次
形成自己的表达
感知、记忆与决策迭代三个自研 Agent,是聆幺幺的应用层技术。基于现有基础模型,让输入、上下文与角色回应形成协作。
SentiFusion · 融感
读懂这一刻的互动线索
把语音、语义、触摸与按键组织成当前情境,为后续回应提供输入。
- 语音与语义线索
- 触摸与按键事件
- 多种输入的情境组织
说一句“今天有点累”,再轻轻摸摸玩偶。感知层把这两种输入一起交给回应逻辑。情绪线索用于互动设计,不作为心理状态诊断。
三个模块的运行方式与具体功能需要在方案和样机中逐项确认;自研范围为 Agent 应用层。
HOW IT WORKS
从一句话到一次完整回应
把硬件输入、AI 逻辑与表达输出分层组织。感知与记忆为决策提供背景,表达完成后更新允许保留的状态。
感知输入语音 / 触摸 / 按键按硬件配置采集互动线索
感知 Agent当下情境
记忆 Agent允许保留的上下文
决策迭代 Agent角色策略 · 表达协调 · 状态更新
表达输出声音 / 表情 / 动作 / 灯光由固件驱动选配组件
现有基础模型 + 自研 Agent 层基础模型提供相关理解与生成能力;三个 Agent 组织玩具的互动应用。模型选择、端侧能力与可选云端能力按硬件、延迟和数据边界确定。
DATA & DESIGN BOUNDARIES
连续的体验
需要清楚的数据边界
无摄像头与本地数据处理是产品设计方向。哪些数据留在何处、哪些功能在断网时可用,需要写进具体方案并验证。
“本地”应覆盖原始输入、记忆与衍生特征,不能只讨论音频文件保存在哪里。
无摄像头意味着什么?
默认按不采集图像的方式设计互动,使用语音、触摸与按键线索。具体硬件配置和验证结果需在样机阶段确认。
记忆留在哪里,能否删除?
先确定设备及本地配套软件的范围,再定义上下文、偏好、故事进度的保存期限和删除机制。“本地不出域”当前是设计方向,尚未作为已验证的实现承诺。
如果使用云端推理呢?
若用户输入、互动记忆或衍生特征需要上传云端,应单独明确处理内容、目的和范围;这部分不能同时称为“数据不出域”。模型训练与用户数据处理也应分别说明。
儿童场景怎么设计?
具体项目先确认适用年龄、内容规则、家长设置和数据责任,再确认交付范围。情绪互动不承担诊断、治疗或替代真实照护的功能。
LET’S BUILD TOGETHER
让技术服务体验与边界
先确定产品要做什么、需要记住什么,再选择硬件、模型和互动规则。