跳到主要内容

Reflekt Health核心流程验收

项目概述​

Reflekt Health 是一款通过 AI 硬件和 AI 分析，帮助美国家庭照顾 75 岁以上独居老人的智能系统。系统包含四个终端：

  • App 端：供家属（中年子女）使用，可通过手机应用商店（App Store 或 Google Play）下载安装，用于关注老人、接收预警、留言互动等。
  • 音箱端：供老人使用，配备触屏、摄像头、麦克风、喇叭，通过语音交互实现日常陪伴、留言播报、紧急呼叫等功能。
  • 运营管理后台：供平台运营人员和客服人员在 PC 端通过浏览器访问，用于设备分配、监控设备状态、处理异常情况等后台管理工作。

核心使用流程

前置步骤：硬件下单与发货​

家属通过线上流程完成硬件订购：

  1. 在官网或商城联系客服下单，提供必要信息。
  2. 客服确认订单后，将硬件套装邮寄给家属（或直接邮寄至老人住所，由家属后续前往安装）。
  3. 硬件套装包含三部分：
    • 触屏智能音箱：带有大屏幕、摄像头、喇叭、麦克风等，支持蓝牙，通过 Wi-Fi 联网。
    • 三个雷达传感器：支持蓝牙，通过 Wi-Fi 联网。
      • (a) 一个放置于床头，用于监控睡眠。
      • (b) 另外两个放置于客厅或卧室，监测老人是否进入该区域或发生跌倒等事件。
    • 智能手表：佩戴于老人手腕，通过 4G 网络实时监测老人的心率、睡眠、运动等数据。

第一步：家属现场安装与初始化​

硬件需由家属（或指定的安装人员）亲自前往老人家中完成安装和初始设置，老人因年事已高通常无法独立操作。

具体流程：

  1. 下载 App：家属在前往老人家中前，或到达后，在手机上的 App Store（iOS）或 Google Play（Android）搜索并下载 Reflekt Health App。
  2. 注册账号：打开 App，通过手机号加验证码完成注册。系统自动创建一个家庭，该注册用户默认为该家庭的管理员。
  3. 进入设备管理：在 App 的“设备管理”页面，开始添加硬件设备。添加设备的方式有两种：
    • 扫描二维码
    • 通过蓝牙连接

第二步：绑定硬件设备（由家属现场操作）​

2-1. 绑定智能音箱

  1. 将音箱通电启动，音箱屏幕会显示一个二维码。
  2. 家属在 App 中选择“添加设备”并扫描该二维码。App 通过蓝牙协议将当前 Wi-Fi 的名称和密码发送给音箱。
  3. 音箱收到 Wi-Fi 信息后自动联网并进行自检。自检主要是针对音箱的各项功能进行检测（比如摄像头、麦克风、喇叭、屏幕等），并且还要自动测试一下 SOS 的服务是否正常。
  4. 自检完成后，音箱即成功绑定至该家庭。

2-2. 绑定三个雷达设备 三个雷达设备的绑定操作逻辑相同：

  1. 将雷达安装于预定位置（床头、客厅、卧室等）并通电。启动后，雷达会自动发送蓝牙信号。
  2. 家属在 App 的“添加设备”页面，通过蓝牙搜索到对应的雷达设备，点击该设备。
  3. App 通过蓝牙协议将 Wi-Fi 名称和密码发送给雷达，雷达自动进行联网配对。
  4. 配对成功后，该雷达即添加至家庭。三个雷达都是一样的操作，重复上述步骤完成三个雷达的绑定。

2-3. 绑定 4G 智能手表

  1. 将手表通电开机，获取手表的设备 ID（通常可在手表屏幕或包装上查看）。手表通过内置 4G 网络独立工作，无需连接家庭 Wi-Fi。
  2. 家属通过 App 内的客服通道联系客服，提供手表的设备 ID 给客服。
  3. 客服在运营管理后台将该手表分配给对应的家庭。
  4. 分配完成后，App 显示手表已绑定。至此，五台智能设备（1个音箱、3个雷达、1个手表）均与家庭建立绑定关系。

安装完成后：家属可向老人简要说明如何使用音箱（如唤醒词、如何点击屏幕 SOS 等）及佩戴手表，然后离开。老人日常使用无需再操作复杂设置。

第三步：管理家庭成员​

管理员可通过 App 邀请其他家庭成员加入，共同关注老人。

邀请流程：

  1. 管理员在 App 中输入家庭成员的手机号码，并选择其权限后发送邀请。系统会自动发送一条注册邀请短信到该家庭成员的手机号。
  2. 受邀成员收到短信后，点击短信内的链接，跳转至应用商店下载 App。
  3. 下载成功后，使用自己的手机号及验证码注册账号。
  4. 注册并登录 App 后，首页会自动弹出邀请确认弹窗，点击确认后即可正式加入该家庭。

角色与权限：

  • 管理员：第一个添加设备并创建家庭的人默认为管理员。在邀请家庭成员时，管理员可以设置该成员的角色权限。
  • 权限类型：
    • 管理权限：可以管理家庭设备、成员等相关信息。
    • 查看处理权限：只能查看家庭数据，并负责处理预警事件等信息。
  • 在邀请成员时可以指定其权限，当成员确认之后，即正式加入家庭。

紧急联系顺序： 管理员可以在 App 中设置家庭成员的紧急联系顺序。当发生预警时，系统会按照设定的顺序依次通知家庭成员。如果所有成员在指定时间内均未处理，系统将自动报警（如拨打 911）。

第四步：家庭留言互动​

家庭成员可通过 App 向老人的音箱端留言，实现远程关怀。

创建留言：

  • 文本留言：可直接输入文本内容，或选择系统提供的模板进行二次编辑后发送。
  • 语音留言：录制一段语音并发送。
  • 提醒频率设置：
    • 一次性提醒
    • 定时播报：可设置具体的提醒时间，并选择每天或每周的重复方式。

留言接收与执行：

  1. 留言创建成功后，系统自动推送到老人的音箱端。
  2. 音箱会定时提醒老人有待收听的留言（语音或屏幕提示）。老人也可通过主动询问的方式，向音箱确认是否有新留言。
  3. 当老人发出“播报留言”的类似指令后，音箱开始播报留言内容。
  4. 播报成功后，系统自动将该条留言的状态设置为“已执行”。

老人反馈机制：

  • 留言播报完毕后，系统会预留一段时间等待老人的回复。
  • 如果老人进行了语音回复，该信息（语音及文字转录）会被记录并同步到 App 端。
  • 家属可通过 App 端实时查看留言的执行状态以及老人的回复内容。

第五步：健康分析与日常预警​

系统通过长期采集老人的数据（包括智能手表、雷达传感器、智能音箱对话等），为每位老人建立一份专属的健康基线。这份基线定义了老人的正常生活状态，涵盖了以下内容：

  1. 基础数据与偏好

    • (a) 老人的操作习惯与偏好
    • (b) 智能音箱的互动对话分析
    • (c) 日常生活的使用习惯

  2. 预警机制：当系统的实时监测数据偏离该健康基线时，App 端会立即向家属发出健康预警信息。

  3. 透明化互动记录：所有家庭成员都可以在 App 中查看老人的日报和周报。这些报告本质上是 AI 护工的沟通记录，AI 护工会基于健康基线和老人的诉求，主动与老人沟通并提供陪伴。

  4. 决策依据展示：为了让子女更加安心，App 端会展示系统在帮老人做什么，并列举具体的决策依据。例如：当系统检测到异常情况时，AI 采取了哪些行动，以及为什么要这么做。这些互动信息都会完整地展示给家属。

  5. 协同机制：当系统无法独立完成某项任务时（例如需要在线下关心老人、带老人去做健康检查或提醒等），系统会将这些需要家庭成员参与的部分列举出来。App 端会及时提醒家庭成员介入，确保线上系统与线下照护的无缝衔接。

以下为基于硬件能力实现的健康预警具体场景，展示系统如何通过多设备协同，实现精准、人性化的风险预警：

5.1 心率/血压趋势预警​

  • 场景描述
    手表连续采集心率、血压数据，结合睡眠监测仪的心率变异性（HRV），分析长期趋势。若连续几天出现异常（如早晨血压持续偏高），系统主动询问老人主观感受，并通知家属关注。

  • 软硬件协同实现方式

    • 硬件：智能手表（心率、血压、HRV）、睡眠监测仪X1（夜间HRV、呼吸率）
    • 软件与AI：
      1. 云端AI每日计算心率、血压均值及变异度，与过去30天基线对比。
      2. 若连续3天早晨血压高于基线15%，触发预警。
      3. AI通过音箱询问老人：“Do you feel dizzy or have a headache?” 记录回复。
      4. 若老人确认不适，升级预警级别；若无症状，生成趋势图表推送至家属App。
      5. App端显示“Blood pressure has been consistently high, please monitor.”，并附上前一晚睡眠质量、活动量等关联数据。

  • 符合美国文化的例子
    “Hi Robert, I've noticed your morning blood pressure has been a bit higher than usual for the past three days. Do you feel any dizziness or headache? This might be something to discuss with your doctor.”

5.2 睡眠呼吸暂停风险​

  • 场景描述
    睡眠监测仪检测到夜间呼吸暂停事件（呼吸停止超过10秒），结合手表血氧饱和度骤降。系统记录频率，若达到临床阈值则提醒家属考虑进一步检查。

  • 软硬件协同实现方式

    • 硬件：睡眠监测仪X1（呼吸率、呼吸暂停事件）、智能手表（血氧饱和度）
    • 软件与AI：
      1. 睡眠监测仪实时上报呼吸暂停事件（时长、发生时间）。
      2. AI计算呼吸暂停低通气指数（AHI），即每小时事件次数。
      3. 若AHI ≥ 15（中重度阈值）且伴随血氧下降，生成预警报告，内容包括夜间血氧最低值、呼吸暂停频率、睡眠分期变化。
      4. 通过App推送家属，并附“You may want to consult a sleep specialist”提示。
      5. AI早晨询问老人睡眠感受，记录到健康档案。

  • 符合美国文化的例子
    “Good morning, Patricia. Last night, you had several episodes where your breathing paused for more than 10 seconds. This could be a sign of sleep apnea. I've shared this information with your daughter in the app. You might want to mention it to your primary care provider.”

5.3 房颤与心律失常预警​

  • 场景描述
    手表ECG监测到疑似房颤或其他心律失常。系统先通过音箱询问老人症状，若无症状则记录为疑似，通知家属关注。

  • 软硬件协同实现方式

    • 硬件：智能手表（ECG）、智能音箱（语音交互）
    • 软件与AI：
      1. 手表ECG数据上传，AI利用房颤检测算法分析（如RR间期不规则性）。
      2. 若检测到疑似房颤，触发询问流程：音箱播放“I noticed your heart rhythm seemed a bit irregular just now. Are you feeling any palpitations, shortness of breath, or chest discomfort?”
      3. 语音识别老人回复，若确认症状，立即启动报警流程；若无症状，记录为“suspected AFib”，在App中展示ECG片段和分析结果，建议家属咨询医生。
      4. 若连续多天检测到，升级预警级别。

  • 符合美国文化的例子
    “Hi William, I detected a possible irregular heartbeat a few minutes ago. Are you feeling okay? Any chest pain or dizziness? If you're feeling unwell, I can alert your emergency contacts right away.”

5.4 跌倒风险动态评估​

  • 场景描述
    手表内置的跌倒风险评估算法结合步态数据（加速度、陀螺仪），实时计算跌倒风险系数。当风险升高时，主动提醒老人注意，并通知家属。

  • 软硬件协同实现方式

    • 硬件：智能手表（加速度计、陀螺仪）、跌倒监测雷达（辅助步态分析）
    • 软件与AI：
      1. 手表持续采集加速度/陀螺仪数据，通过边缘计算或云端分析步态稳定性（步频、步幅、对称性）。
      2. 若跌倒风险系数超过阈值（如步速变慢、步态变异度增大），触发提醒。
      3. 音箱播放提醒：“I've noticed your walking has been a bit unsteady lately. Please take your time when you walk, and consider using your cane if you have one.” 同时通知家属App。
      4. 若检测到老人服用安眠药（用药记录），夜间起夜时自动通过音箱提醒：“Take it slow, and watch your step.”并联动智能夜灯（若支持）。

  • 符合美国文化的例子
    “Hi Dorothy, your walking pattern shows a little more unsteadiness than usual. Make sure to hold onto the handrail when using the stairs. I've let your son Tom know, so he might check in with you later.”

5.5 情绪与压力预警​

  • 场景描述
    手表心情/压力数据持续处于高压力或低情绪状态。系统主动开启陪伴模式，并与家属共享趋势。

  • 软硬件协同实现方式

    • 硬件：智能手表（压力数据、心情数据）、智能音箱（主动互动）
    • 软件与AI：
      1. 手表每日上报压力/心情等级，AI分析周趋势。
      2. 若连续一周压力高于基线或心情低于基线，触发预警。
      3. 系统主动通过音箱播放舒缓音乐、与老人聊天，尝试缓解情绪。
      4. 聊天内容经NLP提取关键词（如“worried about my daughter's job”），记录到健康档案。
      5. 在App端生成情绪报告，推送给家属，提示“Mood has been lower recently, consider giving her a call.”

  • 符合美国文化的例子
    “Hi Helen, I've noticed you've seemed a bit down lately. Is there anything you'd like to talk about? Sometimes sharing helps. Or would you prefer to listen to some relaxing music? I have a playlist of classical favorites.”

5.6 多源融合综合评分​

  • 场景描述
    将心率、血氧、睡眠、活动、情绪等多项指标融合，计算每日健康综合评分，并在显著下降时主动询问并通知家属。

  • 软硬件协同实现方式

    • 硬件：所有传感器数据（手表、睡眠监测仪、跌倒雷达）
    • 软件与AI：
      1. 云端AI每日融合多维度数据，计算综合健康评分（0-100分），权重基于个人基线动态调整。
      2. 若评分较前一日下降超过15分，或连续三天下降，触发预警。
      3. 系统通过音箱询问：“I noticed your overall health score dropped a bit today. Is everything okay? Can I help you with anything?”
      4. 老人回复后，AI记录并生成报告，展示主要扣分项（如“Sleep decreased by 30%”、“Activity level down 40%”）。
      5. 报告推送至家属App，并提供建议（如“You might want to give her a call to see how she's feeling.”）。

  • 符合美国文化的例子
    “Hi James, your health score today is 72, which is lower than your usual 85. It looks like you got less sleep last night and your activity was lower. Is there anything bothering you? I can remind you to take a short walk later if you'd like.”

第六步：危险报警与处理流程​

当系统判定老人可能处于危险状态时，启动严谨的闭环处理流程以降低误报并确保安全。

触发与确认：

  1. 多传感器综合判定：例如当某些传感器采集到危险信号（如跌倒），系统会先通过多设备的传感器进行综合判定。因为系统中设有多个传感器，系统会先检查其他传感器的数据是否正常（如手表心率、其他雷达数据等）。
  2. 语音确认：如果最终判定确实遇到了危险，系统才会向音箱端发出一条语音确认指令，以此降低误报的频率。音箱会通过语音播报的方式，询问老人是否遇到了危险（例如：“我看到您可能摔倒了，您需要帮助吗？”）。

处理流程：

  1. 确认危险：如果在设定时间内没有收到老人的回复，或者老人明确回复“我真的遇到了危险”，系统会进入报警流程。
  2. 通知家庭成员：系统根据预设的紧急联系列表依次通知家庭成员，并实时监听是否有人确认回复。
    • 如果系统没有收到确认回复，会按照列表继续通知下一位成员。
    • 如果所有成员在指定时间内均未回复系统，系统将采取进一步行动。
  3. 紧急报警与兜底：
    • 系统会自动拨打 911 报警电话（在美国），由专业人员上门救助老人。
    • 如果自动拨号在前期无法实现，系统将采取最后兜底的方式，通知平台的运维人员介入处理。

通过以上流程，实现一个危险报警的闭环，确保老人的安全。

记录追溯： 所有的报警历史在 App 端都可以查看，并且可以看到完整的一个时间线。包括每个时间点系统做了什么、基于什么原因去做，以及当时的状态是什么，外部的反馈又是什么等等。

以下为基于硬件能力实现的具体危险报警场景，展示系统如何通过多设备协同，精准识别危险并高效响应：

6.1 跌倒报警的多维确认​

  • 场景描述
    跌倒监测雷达触发“跌倒事件”。系统交叉验证其他传感器（手表心率、睡眠雷达、环境音），并通过音箱语音确认，降低误报。

  • 软硬件协同实现方式

    • 硬件：跌倒监测雷达（跌倒事件）、智能手表（心率、加速度）、睡眠监测仪（在床/离床状态）、智能音箱（语音询问、环境音采集）
    • 软件与AI：
      1. 跌倒雷达触发后，AI立即查询手表数据：心率是否骤升后骤降？加速度是否显示冲击？若夜间，检查睡眠雷达是否离床。
      2. 若所有数据均支持跌倒，AI跳过语音询问直接报警（置信度高）。
      3. 若数据矛盾（如心率平稳），则通过音箱询问：“I think you might have fallen. Do you need help?” 等待10-15秒。
      4. 语音识别分析老人回复：若说“I'm fine, just dropped something”，标记为误报；若无回复或明确求助，立即报警。
      5. 报警时，将GPS位置（手表）、病史等数据一并发送给家属和911。

  • 符合美国文化的例子
    “George, I detected a fall in the living room. Are you okay? Do you need me to call for help?”（若老人无应答，系统自动拨打911并播报：“This is an automated emergency call from Reflekt Health. George Miller at 123 Oak Street has possibly fallen and is unresponsive. He is 82 years old with a history of hypertension.”）

6.2 夜间离床超时预警​

  • 场景描述
    睡眠监测仪检测到老人离床，且超过预设时间（如20分钟）未归，可能是在卫生间发生意外。系统交叉验证跌倒雷达，并通过音箱询问。

  • 软硬件协同实现方式

    • 硬件：睡眠监测仪X1（离床事件、离床时长）、跌倒监测雷达（卫生间区域）、智能音箱（语音询问）
    • 软件与AI：
      1. 睡眠监测仪上报离床，开始计时。若超过预设阈值，AI查询卫生间雷达数据。
      2. 若卫生间雷达显示“无人”或“静止时间过长”，触发预警流程。
      3. 音箱轻柔询问：“Are you in the bathroom? Do you need any help?”（音量调小，避免惊吓）。
      4. 连续两次无应答，且手表心率异常或雷达静止，升级报警。
      5. 若卫生间雷达检测到跌倒，直接进入跌倒报警流程。

  • 符合美国文化的例子
    （凌晨2点，轻声询问）“Margaret, you've been out of bed for a while. Are you okay in there? Just say 'I'm fine' if everything's all right.”

6.3 长时间无活动预警​

  • 场景描述
    区域雷达和手表均显示老人在一个区域长时间静止（如4小时无任何活动），可能发生意外或昏迷。系统尝试语音联系并交叉验证心率。

  • 软硬件协同实现方式

    • 硬件：跌倒监测雷达（所在区域）、智能手表（心率、加速度）、智能音箱（语音呼叫）
    • 软件与AI：
      1. AI持续监测各区域活动。若某区域雷达显示“有人”但长时间无移动事件（如4小时），触发预警。
      2. 先检查手表心率：若心率正常，可能午睡或静坐，标记为“可能休息”，不报警。
      3. 若心率异常或无数据，则通过音箱呼叫：“Are you alright? Please respond if you can hear me.”
      4. 若无应答，且雷达仍无活动，立即通知家属并启动紧急程序。

  • 符合美国文化的例子
    “Robert, you've been in the living room for over four hours without moving. If you're just resting, that's fine, but if you need help, please say something. I'm going to check in with your daughter if I don't hear from you soon.”

6.4 SOS主动求救与定位​

  • 场景描述
    老人按下手表或音箱上的SOS按钮。系统立即获取定位，通知家属，并在必要时自动拨打911。

  • 软硬件协同实现方式

    • 硬件：智能手表（SOS按钮、GPS）、智能音箱（SOS按钮、摄像头、麦克风）
    • 软件与AI：
      1. SOS触发后，系统立即获取手表GPS坐标，同时开启音箱摄像头和麦克风（若室内）。
      2. 向家属App推送报警，附带实时定位地图和老人健康摘要。
      3. 同时自动尝试拨打家属电话（通过VoIP或短信），并开启三方通话通道。
      4. 若家属在规定时间内未确认，系统自动拨打911，并播放预设的语音信息（地址、老人姓名、病史、过敏药物等）。
      5. 所有过程在App端形成时间线记录。

  • 符合美国文化的例子
    老人按下手表SOS后，系统立即向家属手机推送：“Emergency alert from William Johnson. Location: 456 Pine Street, Apartment 3B. Tap to join live video/audio.” 若家属未响应，系统自动拨打911：“This is an automated call from Reflekt Health. William Johnson at 456 Pine Street, Apartment 3B has activated his SOS button. He is 78 years old with a history of heart disease. Please dispatch assistance.”

6.5 多重传感器失灵时的容错报警​

  • 场景描述
    某个关键传感器离线或故障，系统动态调整报警策略，确保基本报警能力仍然有效。

  • 软硬件协同实现方式

    • 硬件：所有设备（均上报在线状态）
    • 软件与AI：
      1. 云端持续监控设备在线状态。
      2. 若跌倒雷达离线，系统自动切换依赖手表的跌倒检测（若有）和活动监测。
      3. 若所有传感器均离线（如停电断网），手表仍通过4G上传心率、SOS等数据，确保报警底线。
      4. 设备离线超过阈值（如2小时），系统向家属和平台运维发送预警。
      5. 在App中提示“Living room motion sensor is offline. Fall detection may be less accurate.”并提供排查建议。

  • 符合美国文化的例子
    App推送：“Hi Sarah, the fall detection sensor in your dad's living room has been offline for 2 hours. This may be due to a Wi-Fi issue. Please check with him or consider visiting to reset the device. His watch is still working and will alert us if he presses SOS.”

6.6 报警历史与决策透明​

  • 场景描述
    每次报警后，生成完整的时间线报告，展示每一步的触发原因和AI决策依据，增强家属信任。

  • 软硬件协同实现方式

    • 硬件：所有传感器事件日志
    • 软件与AI：
      1. 报警事件被记录为结构化日志，包括时间戳、设备ID、事件类型、AI决策步骤。
      2. 在App端以时间线形式呈现，例如：
        • 02:03:15 Radar fall event triggered
        • 02:03:16 Watch heart rate: 128 bpm (elevated)
        • 02:03:18 Sleep monitor: out of bed
        • 02:03:20 Speaker asked: “Do you need help?” – no response
        • 02:03:35 Escalated to emergency contacts
      3. 家属可查看详细数据（如ECG片段、雷达原始数据摘要），理解报警原因。
      4. 平台可基于这些数据优化算法，定期推送“System Improvement Report”给用户，提升透明度。

  • 符合美国文化的例子
    报警历史页面展示完整时间线，家属可看到每一步决策依据，如“系统检测到跌倒→手表心率异常→音箱询问无应答→通知紧急联系人”，让家属清楚了解AI的判断逻辑。

第七步：主动 SOS 呼叫​

除了传感器采集到信号并判定为危险之外，老人也可以通过语音或者屏幕点击的方式，向音箱端主动发起 SOS 呼叫。

触发方式：

  • 通过语音向音箱发出指令（如“帮帮我”、“我需要帮助”）。
  • 通过点击音箱屏幕上的 SOS 按钮。
  • 通过智能手表上的紧急呼叫按键（手表通过 4G 网络独立工作，可随时发起）。

处理流程： 当老人发起这个呼叫时，即主动发起了一个危险报警。该报警的后续处理，将走回与第六步相同的流程。

记录： 主动发起的报警记录在 App 端也是可以查看的。其处理流程与第六步一模一样，只是触发的方式不同：

  1. 系统自动发起报警
  2. 老人主动发起报警

第八步：AI 日常陪护​

AI 护工还有一个很重要的功能，就是代替家庭成员给老人提供更细致、更人性化的日常陪护。

个性化互动： 首先，系统会先分析老人的一些健康情况、节律数据、使用偏好、健康基准等信息。定时会给老人一些陪伴，例如：

  1. 日常提醒：如起床提醒、天气播报等。
  2. 用药提醒：如果他有历史用药信息，系统可以像真人一样给出提醒。

记忆与进化： 所有的这些偏好数据都要定期保存下来，让这个 AI 护工越用越懂老人。他了解老人的脾性、喜好以及各种各样的信息，会在日常给他一些关心和陪伴。所有的这些信息都需要写入到记忆系统里面去，并与这位老人进行深度绑定。

价值呈现： AI 护工的各项功能，包括老人主动沟通的记录，以及 AI 为老人所做的这些事情，都要在 App 端做一个呈现。这样做是为了让家庭成员看到系统的价值，让他们放心。AI 护工在帮助他们照顾他们的老人，这个时间线需要完整呈现，展示 AI 看到了什么、做了什么，需要呈现完整的时间线以及证据链路等内容。

以下为基于硬件能力实现的具体日常陪护场景，展示系统如何通过多设备协同，实现有温度、个性化的陪伴：

8.1 早安问候与夜间复盘​

  • 场景描述
    清晨，当睡眠监测仪检测到老人已离床（或在床苏醒），结合手表确认清醒状态后，音箱主动问候。问候语融入昨晚睡眠质量、天气、前一天的互动记忆。

  • 软硬件协同实现方式

    • 硬件：睡眠监测仪X1（在床/离床状态、睡眠分期、心率、呼吸率）、智能手表（清醒状态、HRV、心情数据）、智能音箱（语音输出、麦克风）
    • 软件与AI：
      1. 云端AI接收睡眠监测仪和手表数据，分析睡眠质量（深睡时长、醒来次数、HRV趋势），与历史基线对比。
      2. 若老人昨晚曾有不适（如夜间头痛），数据库中有记录，AI在问候时跟进。
      3. 音箱在检测到离床事件后1-2分钟内触发问候，问候语根据分析结果动态生成。

  • 符合美国文化的例子
    “Good morning, Bob! You had 2 hours and 40 minutes of deep sleep last night, which is 20 minutes more than usual. You must be feeling energetic today. The weather in Miami is sunny and 75°F—perfect for a walk in the park.”
    “Good morning, Mary. I noticed you woke up twice last night. Was it because of your back pain again? Would you like me to remind you to do your stretching exercises later?”

8.2 智能用药与健康提醒​

  • 场景描述
    根据预设用药时间，结合实时生理数据，进行个性化提醒。若老人已服药，可语音反馈并记录；若未服药，结合厨房雷达判断是否用餐，以决定是否再次提醒。

  • 软硬件协同实现方式

    • 硬件：智能手表（实时心率、血压）、跌倒监测雷达（厨房/餐厅区域）、智能音箱（语音提醒、接收反馈）
    • 软件与AI：
      1. 用药计划存储于云端数据库（家属预设）。
      2. 在预设时间前，AI检查当前心率/血压是否偏离基线，若异常则调整提醒语气。
      3. 若老人回应“I already took it”，AI确认后更新数据库，并通过App通知家属。
      4. 若未回应且厨房雷达检测到用餐活动，稍后再次提醒。
      5. 若老人明确说“I don't want to take it today”，记录并通知家属。

  • 符合美国文化的例子
    “Hi John, it's 8 AM. Time to take your blood pressure medication. Remember to take it with a full glass of water.”
    “I see you're in the kitchen having breakfast. Don't forget to take your diabetes medication after you finish eating.”

8.3 久坐与活动鼓励​

  • 场景描述
    跌倒监测雷达检测到老人长时间在客厅沙发区域静止（超过设定阈值），音箱主动提醒，并根据天气、老人健康状况等个性化鼓励活动。

  • 软硬件协同实现方式

    • 硬件：跌倒监测雷达（客厅）、智能手表（步数、活动量基线）、智能音箱（语音提醒）
    • 软件与AI：
      1. 雷达数据实时上报云端，AI分析在沙发区域的静止时长，与历史活动节律对比。
      2. 若超过个人基线（如平常每2小时起身，现在已2.5小时未动），触发提醒。
      3. AI查询天气API、手表步数（判断活动量是否达标），并结合健康档案（如膝盖不好）生成个性化鼓励语。
      4. 音箱播放提醒，若老人回应“I'm tired”，记录“活动意愿低”，在家属日报中体现。

  • 符合美国文化的例子
    “Hey Margaret, you've been sitting for almost two hours. How about getting up and stretching a little? Maybe you could walk to the kitchen and get a glass of water.”
    “It's such a nice day outside, and you've only taken 1,500 steps so far. Would you like me to play your favorite Frank Sinatra music while you take a short walk around the living room?”

8.4 情感陪伴与兴趣互动​

  • 场景描述
    在老人空闲时（如长时间在客厅静坐、听收音机），主动提供兴趣内容，如播放喜欢的音乐、讲笑话、或引导节日祝福。

  • 软硬件协同实现方式

    • 硬件：跌倒监测雷达（客厅）、智能手表（心情数据、压力数据）、智能音箱（播放内容、语音交互）
    • 软件与AI：
      1. AI分析雷达数据，判断老人是否处于“空闲可交流”状态（如沙发静坐超过30分钟且无TV声音）。
      2. 结合手表心情/压力数据，若偏低则主动发起情感陪伴。
      3. 从老人兴趣库（历史对话、音乐播放记录）中选取内容。
      4. 若检测到节日（日历记录），自动准备节日祝福，并询问是否需要给家人留言。
      5. 老人回应后，AI可进一步互动（如“Which song would you like to hear?”），并根据反馈调整内容。

  • 符合美国文化的例子
    “Hi Bill, you seem to be relaxing. Would you like to listen to some Elvis Presley? I remember you mentioned he's your favorite.”
    “Thanksgiving is next week. Would you like me to help you record a voice message for your daughter Susan to let her know you're looking forward to seeing her?”
    “I noticed your stress level has been a bit higher today. Can I tell you a joke to cheer you up? Why don't scientists trust atoms? Because they make up everything!”

8.5 天气与环境关怀​

  • 场景描述
    结合天气预报、室内环境传感器数据（手表IAQ）和老人实时位置（手表GPS），提供出门提醒或室内通风建议。

  • 软硬件协同实现方式

    • 硬件：智能手表（IAQ、GPS）、跌倒监测雷达（门口区域）、智能音箱（语音提醒）
    • 软件与AI：
      1. 云端AI获取天气API数据，并与手表IAQ（如二氧化碳浓度）融合。
      2. 当雷达检测到门口有人且GPS开始移动时，判断老人即将出门。
      3. AI根据天气和老人健康档案（如关节炎患者对寒冷敏感）生成提醒语。
      4. 若IAQ显示室内空气差，且老人长时间在家，可主动提醒开窗或启动空气净化器（若智能家居联动）。

  • 符合美国文化的例子
    “It's going to rain this afternoon, Bob. If you're planning to go out, don't forget your umbrella. It's by the front door.”
    “The indoor air quality is a bit stuffy right now. Would you like me to remind you to open a window for a few minutes?”

8.6 记忆与个性化记录​

  • 场景描述
    系统长期记忆老人的重要信息（如家人名字、健康抱怨、偏好），并在适当时候调用，让老人感觉被记住、被关心。

  • 软硬件协同实现方式

    • 硬件：智能音箱（语音交互）用于收集信息；手表、雷达等提供背景数据。
    • 软件与AI：
      1. 自然语言处理（NLP）从老人日常对话中提取关键信息，如“my grandson Michael is coming to visit”、“my knee hurts when it rains”。
      2. 这些信息结构化存储到老人的专属知识图谱。
      3. 在后续互动中，AI会结合时间（如孙子来访日期）、健康数据（如膝盖疼与天气变化）主动提及。
      4. 所有互动和记录在App端形成透明日志，让家属了解AI如何关心老人。

  • 符合美国文化的例子
    “Tomorrow is the day your grandson Michael is coming to visit! Would you like me to remind you to buy some cookies that he likes?”
    “I remember you mentioned your knee hurts when it's cold. Today's temperature is dropping, so you might want to wear your knee brace if you go out.”

第九步：设备离线与容错​

当音箱、传感器或雷达等各类硬件设备离线时，系统会执行一系列兜底操作：

  1. 设备端提示

    • (a) 音箱屏幕会显示提示信息，例如：“我已断网，请检查网络。”
    • (b) 当老人发起呼叫时，系统会自动播报固定的语音文件进行提醒，例如：“我已经断网了。如果您真的遇到了危险或有需要，可以主动联系您的子女，或者拨打 911、999 求助。”
    • (c) 提示信息的语气应选择得更加柔和，让老人感到安心。

  2. 后台监测与预警

    • (a) 系统后台在监测到设备离线后，会启动预警机制。
    • (b) 超过设定的时间阈值后，系统将向平台运维人员、家属或家庭成员发送预警通知，告知他们设备已离线。
    • (c) 该预警触发时间支持在后台进行自定义配置，例如 2 小时或 5 小时等。

第十步：实时语音和视频通话​

音箱设备支持摄像头、屏幕、麦克风以及喇叭等功能，家属可以通过 App 端发起实时的语音和视频通话。

具体流程：

  1. 发起通话：家属在 App 端发起实时视频通话。
  2. 数据传输：
    • (a) 画面传输：音箱端通过摄像头采集实时画面，并传递回 App 端。
    • (b) 声音传输：通过麦克风采集周围的声音，实时播报给 App 端。
  3. 双向互动：老人也可以在音箱前与家属进行对话。
  4. 记录保存：所有的通话记录都需要保存下来，方便在 App 端进行查看。