长说不带停顿时按能量最低点软切:6s 先发一段,不再憋到松手
一口气说不停顿是语音输入最慢的路径:没有 0.5s 停顿就一段都发不出去, 只能等松手整段上传。改成累计语音到 6s 就在低能量处分段发出: - 只在尾部 3s 窗口里找切点:太靠前会把很久以前的低点当作刀口 - 切点按分片边界取:每片已有峰值 dB(与 segChunks 平行的 segLens/segDbs), 取最小者下刀,尾部静音是 -Infinity 会天然胜出 → 落在气口上 - 切完剩下的留在缓冲继续累积,不丢采样、不重复;真静音切点仍优先 - 25s 硬切保留作兜底(软切一直不成立时才会走到) - silLen 在切后被钳到剩余长度:切点落在尾巴静音里时不能超过段长 代价:刀口是分片粒度(APK 约 100ms),可能劈在字中间,所以段更短; 调大 VAD_SOFT_CUT_SEC 可让切点更可能落在真实气口。
This commit is contained in:
+3
-1
@@ -22,6 +22,8 @@
|
||||
|
||||
1. 用户按住 `#voice-hold` → 页面开始录音(套壳调 `startVoice()`,浏览器自己 `getUserMedia`),同时把整块输入区换成全宽遮罩(实时声波 + 提示文案)。
|
||||
2. 壳推 / 浏览器采的 PCM 进来后,页面自己判停顿(连续静音 ≥0.5s)→ 立即 POST 该段 → 结果攒在内存里。
|
||||
一直不停顿地长说时,累计约 6s 会在**能量最低的分片边界**先切一刀(软切)→ 同样先发出去,
|
||||
否则整段只能憋到松手才上传(这是最慢的路径)。
|
||||
3. 手指上滑进入文案区 = 取消态;松手时处于取消态则**整轮丢弃**(已上传段的结果也丢掉),输入框保持原样。
|
||||
4. 松手 → 页面把尾巴里**有声音的部分**发出去(纯静音的尾巴不发,否则只会换来一次「没有可识别人声」)
|
||||
→ 等所有段回来 → **一次性**写进输入框 → 自动发送。
|
||||
@@ -35,7 +37,7 @@
|
||||
`ScriptProcessor` 虽已标废弃,但 Chrome/Safari/Firefox 都还在,这点开销可忽略。
|
||||
- 降采样:浏览器采样率通常是 44.1k/48k,`downsampleTo16k()` 按「一个输出周期内取均值」降到 16k,
|
||||
小数相位跨分片累计(整数倍抽取会越录越快/越慢)。**不能**把 44.1k 直接喂进 VAD ——
|
||||
0.5s 停顿与 25s 段长都是按 16k 估算的。
|
||||
0.5s 停顿、6s 软切与 25s 段长都是按 16k 估算的。
|
||||
- iOS Safari:`AudioContext` 必须在手势里创建/resume;`await getUserMedia` 之后已脱离手势,
|
||||
所以按下(`pointerdown`)时就先把 ctx 建好,拿到麦克风后复用。
|
||||
- 浏览器只在安全上下文开麦:`http://<IP>` 下麦克风按钮不会出现,只有 HTTPS 域名(或套壳壳内)可用。
|
||||
|
||||
Reference in New Issue
Block a user