核心技术 / TECHNOLOGY

感受当下 记得上次
形成自己的表达

感知、记忆与决策迭代三个自研 Agent,是聆幺幺的应用层技术。基于现有基础模型,让输入、上下文与角色回应形成协作。

SentiFusion · 融感

读懂这一刻的互动线索

把语音、语义、触摸与按键组织成当前情境,为后续回应提供输入。

  • 语音与语义线索
  • 触摸与按键事件
  • 多种输入的情境组织
说一句“今天有点累”,再轻轻摸摸玩偶。感知层把这两种输入一起交给回应逻辑。
情绪线索用于互动设计,不作为心理状态诊断。

三个模块的运行方式与具体功能需要在方案和样机中逐项确认;自研范围为 Agent 应用层。

HOW IT WORKS

从一句话到一次完整回应

把硬件输入、AI 逻辑与表达输出分层组织。感知与记忆为决策提供背景,表达完成后更新允许保留的状态。

感知输入语音 / 触摸 / 按键按硬件配置采集互动线索
感知 Agent当下情境
记忆 Agent允许保留的上下文

决策迭代 Agent角色策略 · 表达协调 · 状态更新

表达输出声音 / 表情 / 动作 / 灯光由固件驱动选配组件

现有基础模型 + 自研 Agent 层基础模型提供相关理解与生成能力;三个 Agent 组织玩具的互动应用。模型选择、端侧能力与可选云端能力按硬件、延迟和数据边界确定。

DATA & DESIGN BOUNDARIES

连续的体验
需要清楚的数据边界

无摄像头与本地数据处理是产品设计方向。哪些数据留在何处、哪些功能在断网时可用,需要写进具体方案并验证。

“本地”应覆盖原始输入、记忆与衍生特征,不能只讨论音频文件保存在哪里。

无摄像头意味着什么?

默认按不采集图像的方式设计互动,使用语音、触摸与按键线索。具体硬件配置和验证结果需在样机阶段确认。

记忆留在哪里,能否删除?

先确定设备及本地配套软件的范围,再定义上下文、偏好、故事进度的保存期限和删除机制。“本地不出域”当前是设计方向,尚未作为已验证的实现承诺。

如果使用云端推理呢?

若用户输入、互动记忆或衍生特征需要上传云端,应单独明确处理内容、目的和范围;这部分不能同时称为“数据不出域”。模型训练与用户数据处理也应分别说明。

儿童场景怎么设计?

具体项目先确认适用年龄、内容规则、家长设置和数据责任,再确认交付范围。情绪互动不承担诊断、治疗或替代真实照护的功能。

LET’S BUILD TOGETHER

让技术服务体验与边界

先确定产品要做什么、需要记住什么,再选择硬件、模型和互动规则。

整理合作需求