Amadeus · 鲸鱼娘
🐋 Amadeus
DSH 的 Galgame Mode —— 鲸鱼娘住在你的手机里,在电脑上替你干活
不是对话框套壳。是一场演出:打字机逐字浮现、立绘随情绪切换、幕后活动在文本框上方滚动成字幕,
长报告收进小窗,选项变成 Galgame 选项卡。
🎨 全部美术素材(立绘 / 背景 / 装饰)均取自 DSH 社区开源项目,非本仓库原创
署名链与许可 → 素材与合规
中文
✦ 她在电脑上真的在干活 ✦
danger-full-access · 读写任意文件 · 执行任意命令 · 无需逐条确认
你看到的每一句软糯台词背后,是一次真实的工具调用。
⚠️ 这是一个 Demo
个人实验作品,非生产级产品。 协议、接口、素材都还在快速演进——随时可能推倒重来。
正因如此,它更需要你——欢迎一起来共创 🐋
📖 目录
🌊 这是什么
叙事线
· demo = 你与鲸鱼娘的相识(海边月夜,礁石初遇)
· 真实会话 = 相识之后的居家日常,每场独立、性格固定、不跨会话记忆
| 你在电脑上看到的 | 你在手机上看到的 |
|---|
| DSH 正常跑任务:改文件、跑测试、查资料 | 🎭 剧场:立绘呼吸、打字机、情绪切换 |
| 工具调用、推理、多步执行 | 📜 事件流:幕后活动化作一行行浮字淡出 |
| 长报告、diff、表格 | 🪟 四窗口:报告 / 预览 / 选项 / 历史 |
| 会话列表 | 💾 读档页:每个会话 = 一个存档位 |
关键区别:手机不是远程桌面,电脑不是被投屏。原生 Compose 承担全部演出,DSH 只负责把 Agent 的真实事件流转译成剧场帧。
🏛 三层架构
flowchart TB
subgraph HOST["🖥 电脑 · DSH Host(同一进程)"]
direction TB
MODE["amadeus Mode<br/>鲸鱼娘人格 · danger-full-access"]
PLUGIN["dsh-amadeus plugin<br/>① 接 agent 事件流 → Galgame 帧<br/>② 注册 extension 业务路由"]
GW["dsh-mobile 安全连接层(复用)<br/>配对 · 证书 · CSRF · SSE · WebSocket"]
MODE -->|"驱动"| PLUGIN
PLUGIN -->|"register"| GW
end
subgraph PHONE["📱 手机 · Amadeus App · Compose"]
direction LR
T["🎬 标题画面"] --> D["demo<br/>相识剧本"] --> P["📷 扫码配对"] --> S["💾 读档页"] --> TH["🎭 剧场"]
end
GW -->|"LAN · 10486"| PHONE
GW -->|"cpolar 远程隧道"| PHONE
🎭 剧场构成:全屏立绘 · 打字机逐字 · 事件流浮字 · 四窗口(报告 / 预览 / 选项 / 历史)
设计铁律|不重写网关
插件在 DSH Host 进程内(服务名 amadeusAccess),向 dsh-mobile 的共享网关注册自己的 extension 路由——
配对、证书、CSRF、SSE、WebSocket 全部复用,零重复实现,独立命名空间 /amadeus。
数据通路
flowchart LR
EV["Agent 事件流<br/>assistant/message · turn/start·end<br/>tool/step · approval/request"]
ST["amadeus-stream.ts<br/>转帧"]
SSE["SSE<br/>/stream/:sessionId"]
APP["📱 App 打字机"]
FRAMES["帧类型<br/>dialogue 台词逐句<br/>activity 幕后活动浮字<br/>choice 选项卡<br/>turn 回合边界<br/>ended 演出收束"]
EV --> ST --> SSE
SSE --> APP
SSE --> FRAMES
APP -->|"POST /choice · /approval"| EV
💬 演出协议 [[AMW:]]
一段输出 = 一次演出。 每次回复 2–4 个短句(每句 15–30 字、句间换行),段尾一组标签驱动整段演出状态:
呜... 月光照在礁石上呢... 有你在身边,感觉暖暖的 啾~
[[AMW:{"sprite":"happy"}]]
🎭 sprite 表情表(9 值)
📐 编排规则
|
🎬 演出
- 标签只需
sprite 一个字段(voice/window 为预留元数据)
- 立绘整图 Crossfade 切换
- 保留上一轮表情——用户发言期间不回
normal
|
🤫 幕后
- 思考/工具调用不暴露为灰字台词
turn/end 边界 + activity 帧 → 事件流浮字
- 回合结束统一淡出
|
|
📄 长文本
- 超长内容走
save_report / show_preview 存窗口
- 对话框只留鲸鱼娘口吻的摘要
- Host 兜底截断
|
🔀 选项
- 不自己写选项
- 用
ask_user_question 工具 → Host 转 Galgame 选项卡
- 可「暂时不选」=
/choice/cancel(防 agent 挂死)
|
🗂 仓库地图
| 目录 | 内容 |
|---|
presets/amadeus/ | 🎭 鲸鱼娘人格(agent-plane 配置) |
src/ | ⚙️ Host 插件 · 36 模块 |
app/amadeus-android/ | 📱 原生 Compose App |
app/amadeus-android/app/src/main/assets/amadeus/ | 🎨 立绘 · 背景 · UI 装饰 |
tests/ | ✅ 12 文件 · 99 tests |
docs/ | 📚 3 份设计文档 |
⚙️ src/ 模块清单(点击展开)
| 模块 | 职责 |
|---|
amadeus-plugin.ts | 入口:注入 adapter、开场、组装 extension |
amadeus-extension.ts | 业务 REST 路由注册 |
amadeus-stream.ts | follow() 事件流 → SSE 帧 |
amadeus-sessions.ts | 会话 adapter(列/建/改/删/历史) |
amadeus-session-registry.ts | 会话归属落盘缓存 |
amadeus-choices.ts | ask_user_question answerer → 选项卡 |
amadeus-approval.ts | 审批 answerer → App 决定 |
amadeus-reports.ts | 报告 / 预览持久化 |
amadeus-tools.ts | save_report / show_preview 工具 |
amadeus-control.ts | 控制面板(running / devices / pairing) |
amadeus-remote.ts | 远程 provider 框架 |
gateway.ts | 复用 dsh-mobile 安全网关的注册入口 |
amadeus-client.ts | DSH web 控制面板(设置页) |
🌐 业务 REST 路由
经 extension 注册在共享网关上——App 实际只走这些
| 路由 | 用途 |
|---|
GET /sessions · POST /sessions | 列会话(读档页)/ 新建(默认工作区) |
GET /sessions/:id 等 | 改名 / 删除 / 历史分页 |
GET /workspaces[/browse] · POST /workspaces/register | 工作区列表 / 目录浏览 / 注册 |
GET /stream/:sessionId | SSE 帧流(dialogue / choice / activity / turn / ended) |
POST /choice · /choice/cancel | 选项选中 / 暂时不选 |
POST /approval | 审批答复(批准 / 拒绝) |
GET /reports · /previews | 报告 / 预览(长文本交付物) |
POST /tag/ensure | (内部)标签同步 |
🔧 管理面板路由 /api/amadeus(点击展开)
供 DSH web 控制面板使用:status · control · pairing · devices · remote/*(provider 切换、cpolar/frp 组件安装与配置、重连、重置)。
配对认证与 TLS 细节见 配对认证与 TLS 设计。
🚀 快速开始
① Host 侧(电脑)
# 依赖
node -v # 需要 ^22.19.0 || >=24.0.0
npm install
# 构建:lib/index.mjs(Host 插件)+ lib/client.js(web 控制面板)
npm run build
# 测试
npx vitest run # 12 files / 99 tests
插件随 DSH 启动加载。改完 src/ → npm run build → 重启 DSH 生效。
# 本地管理(DSH 跑着才有)
curl http://127.0.0.1:3080/api/amadeus/status
② App 侧(手机)
cd app/amadeus-android
./gradlew :app:assembleDebug
adb install -r app/build/outputs/apk/debug/app-debug.apk
| 项目 | 值 |
|---|
| applicationId | com.amadeus.whale |
| compileSdk / targetSdk | 36 / 36 |
| minSdk | 29(Android 10+) |
| 依赖 | Coil · OkHttp SSE · kotlinx-serialization · CameraX · ZXing |
③ 配对
sequenceDiagram
autonumber
participant U as 👤 用户
participant A as 📱 Amadeus App
participant G as 🔐 网关
U->>A: 点击「连接」
A->>U: 📷 扫码(CameraX + ZXing)或手输 URL
U-->>A: 配对链接
Note over A,G: 首次 —— 信任建立
A->>G: 拉取 ca.cer(trust-all client)
G-->>A: 证书
A->>A: pin 证书指纹
Note over A: 之后改用受信 client
A->>G: 提交配对token
G-->>A: device token + session + CSRF
A->>A: 存入 Android Keystore<br/>alias amw_device_v1
A-->>U: ☑ 配对完成,进入读档页
⚠️ 凭据按网关 origin 隔离 —— 换域名 / 端口需重新配对。
局域网(:10486)与 cpolar 远程隧道共享同一配对窗口。
📱 App 演出层
|
🎭 剧场
- 打字机:逗号 +90ms / 句号叹号 +135ms / 省略号 +225ms
- 点击立即打满
- 立绘随 sprite 整图 Crossfade
- 句末 ▼(等待)/ 三点脉动(working)
|
📜 事件流
- 文本框上方右侧滚动浮字
- 黑字白描边 · 单行 · 上限 5 条 · 9s 淡出
- 回合结束统一渐隐
|
|
🪟 四窗口
- 报告:长文本交付物
- 预览:网页 / 图片 / 代码 / 表格
- 选项:居中限高可滚,可「暂时不选」
- 历史:透明侧栏,只含演出文本
|
💾 读档页
- 会话 = 存档位,按工作区分组倒序
- 新建 = 「开启新的一天」
- 可选工作区目录
|
|
🎨 视觉
- 双主题:暖色治愈(默认)/ 深色
- 深蓝 × 金 × 女仆蕾丝装饰层
- 字体:马路口圆体(SIL OFL 1.1)
|
🎬 Demo
- 首次设备播一次(清数据才重放)
- 设置可重放
- 24 句月夜初遇剧本 · 本地演出
|
📊 状态仪表盘
✅ 已实现 · 真机验证
- Host 会话闭环
(建会话 → Agent 干活 → SSE 演出 → 报告/选项/审批全链路)
- App 剧场全部演出层
- 配对 / 认证 / TLS
(LAN 直连 + cpolar 远程)
- 读档页按工作区组织
- 事件流 + 回合边界信号
- choice 取消防挂死
- 会话注册表缓存(避免全量读 surface)
- Host 99 tests 全绿
|
🚧 已知缺口
| 项 | 状态 |
|---|
| 真实会话开场白 | 方案已定,文案未写 | | BGM | res/raw/ 静音占位 | | 专属 logo | 暂用 🐳 + 文字 | | 表情差分(动作×表情矩阵) | 未开始 | | 居家室内背景库 | 缺素材 | | frpc 实机启停 | 未联调(cpolar 已验证) | | Live2D | 预留接口,本期不做 |
|
🗺 路线图
flowchart LR
A["✅ 剧场闭环<br/>配对认证 · 远程隧道"]
B["⏳ 开场白文案<br/>BGM 素材 · 专属 logo"]
C["⏳ 表情差分<br/>动作 × 表情矩阵"]
D["⏳ 居家背景库<br/>frpc 实机联调"]
E["🔮 Live2D 接入<br/>SpriteRenderer 已抽象"]
A --> B --> C --> D --> E
📐 详细缺口清单(点击展开)
- 真实会话开场白 — 方案已定:Host/preset 自动注入一句固定问候,未写文案
- BGM —
res/raw/ 为静音占位 WAV;方案:CC0 素材替换 + 接播放器
- 专属 logo — 现 🐳 emoji + 标题文字
- 表情差分 — 动作 × 表情矩阵,GPT image2 分批扩充,未开始
- 背景库 — 缺居家室内
- 远程 provider — frpc 实机启停未联调(cpolar 已实机验证)
- Live2D — 预留接口,本期不做
🤝 共创
这是个 Demo,所以每一扇门都还开着。
无论是补一张立绘、调一句台词,还是接上 Live2D——都欢迎。
|
🎨 美术 / 声音
- 表情差分(动作 × 表情矩阵)
- 居家室内背景库
- BGM / 环境音(CC0 素材)
- 专属 logo
|
🧠 人格 / 演出
- 改鲸鱼娘人格 →
presets/amadeus/
- 调演出节奏 / 标签协议
- 真实会话开场白文案
- demo 剧本扩充
|
|
⚙️ Host 插件
- 远程 provider →
src/amadeus-remote.ts
- frpc 实机联调
- 新窗口类型 / 新工具
- 测试与边界情况
|
📱 App
- Compose 演出层
- Live2D 接入(
SpriteRenderer 已抽象)
- 主题 / 动效
- 真机兼容性
|
怎么加入
flowchart LR
F["① Fork"] --> B["② 开分支"] --> C["③ 改点东西"] --> P["④ Pull Request"]
| 你想… | 去哪 |
|---|
| 🐛 报 bug / 提想法 | 开 Issue |
| 💬 先聊怎么改 | 先讨论再动手,避免白做 |
| 📄 换素材 | 记得同步 SOURCES.md 署名链(CC BY-NC-SA 要求) |
| 🔍 看懂现有实现 | 深入文档 · docs/ 三份设计文档 |
没有「太小」的贡献——一句更贴的台词、一张更顺眼的立绘,都算数。
🎨 素材与合规
🖼 美术素材 —— 全部来自他处,非本仓库原创
立绘、背景、UI 装饰没有一件是本仓库原创。 全部取自下列 DSH 社区开源项目,按 CC BY-NC-SA 4.0 使用,署名链(创作链)必须完整保留:
上游许可原文与 NOTICE 见各自仓库。本素材集不包含任何厂商官方形象、合作或背书(Claude / GPT 等名称与商标归各自权利人所有)。
素材路径
- 逐文件来源 / 完整署名链 →
app/amadeus-android/app/src/main/assets/amadeus/SOURCES.md
- 源素材备份 →
app/assets/(sprites / backgrounds) · 打包实际使用 → assets/amadeus/
⚖️ 许可
| 对象 | 许可 | 说明 |
|---|
| 代码 | Apache-2.0 | 见 package.json |
| 美术素材 | CC BY-NC-SA 4.0 | 署名 · 非商用 · 相同方式共享 |
| 字体(马路口圆体) | SIL OFL 1.1 | app/amadeus-android/app/src/main/assets/licenses/ |
⚠️ CC BY-NC-SA 限非商业使用 —— 本项目为个人非商业项目,符合该条款;
若转商用,必须替换全部美术素材。素材与代码协议分离:素材 CC BY-NC-SA,代码 Apache-2.0。
📚 深入文档
🛠 开发备忘
# Host 插件:改 src/ → 构建 → 重启 DSH
npm run build
# App:改 Kotlin → 构建 → 安装
cd app/amadeus-android && ./gradlew :app:assembleDebug && adb install -r app/build/outputs/apk/debug/app-debug.apk
# 测试
npx vitest run
会话判定:agentPreset === 'amadeus' 直判;历史/web 会话靠注册表缓存读 surface
(~/.dsh/amadeus/session-registry.json)。
🐋
「呜... 月光照在礁石上呢... 有你在身边,感觉暖暖的 啾~」
—— 但她刚刚真的帮你改完了那 3 个文件。
这还是只个 Demo。
下一句台词、下一张立绘、下一个窗口——等你一起来写。