benchmark

其他社区

作者仓库星标 749
许可证 Apache-2.0
作者仓库 speech-swift

解读按原文结构重写，命令、链接、术语均保留；右侧可核对作者原始 SKILL.md

原文结构

Usage：/benchmark asr — transcribe test audio, report RTF /benchmark tts — synthesize test text, report RTF /benchmark vad — VAD on VoxConverse (all engines)
Performance targets (M2 Max)：Module · Metric · Target ASR (Qwen3) · RTF · ~0.06 ASR (Parakeet) · RTF · ~0.025

适用与边界

当前原文没有单列适用场景。
当前原文没有单列不适用场景或限制。

原文中的明确线索

要点：「Run benchmarks using the release build.」
文件与命令：/build、/benchmark asr、/benchmark tts、/benchmark vad、/benchmark diarize

流狐整理：以上内容来自当前 SKILL.md 的章节与原词；未补写作者没有声明的工具、兼容性或能力。

Benchmark

Run benchmarks using the release build. Build first with /build.

Usage

/benchmark asr — transcribe test audio, report RTF
/benchmark tts — synthesize test text, report RTF
/benchmark vad — VAD on VoxConverse (all engines)
/benchmark diarize — DER on VoxConverse (requires downloaded test set)

module="$ARGUMENTS"
cli=".build/release/speech"

case "$module" in
  asr)
    $cli transcribe Tests/Qwen3ASRTests/Resources/test_audio.wav 2>&1
    ;;
  tts)
    $cli speak "The quick brown fox jumps over the lazy dog." --output /tmp/bench_tts.wav 2>&1
    ;;
  vad)
    python3 scripts/benchmark_vad.py --compare --num-files 5 2>&1
    ;;
  diarize)
    python3 scripts/benchmark_diarization.py --num-files 5 2>&1
    ;;
  *)
    echo "Usage: /benchmark [asr|tts|vad|diarize]"
    ;;
esac

Performance targets (M2 Max)

Module	Metric	Target
ASR (Qwen3)	RTF	~0.06
ASR (Parakeet)	RTF	~0.025
TTS	RTF	~0.7
VAD (Silero)	RTF	>20x real-time
Diarization	DER	<10% (VoxConverse)

流狐档案作者与许可取自来源；运行、权限和网络为流狐检测或估算

流狐分类: 通用
作者声明 Agent: 未找到明确声明；不据此推断已兼容或已测试
静态检查: 94 / 100 · 启发式扫描，不代表运行安全
作者 / 版本 / 许可: @soniqo · Apache-2.0
流狐 Token 估算: 低消耗
流狐接入估算: 即装即用
是否需要外部 API Key: 未发现要求
检测到的系统要求: macOS
底层运行要求: 未声明
检测到的文件与系统行为: 只读
检测到的网络行为: 仅限本地
安装命令数: 无（仅作为资料）

档案由构建时根据 SKILL.md 与安装命令自动衍生，可能与作者实际意图存在差异。

需要注意： 未限定 allowed-tools，默认拥有全部工具权限。

输出预览 benchmark-cb577318e5.preview

作者没有在当前 SKILL.md 中定义固定输出样例。

SKILL.md SKILL.md

# Benchmark

Run benchmarks using the release build. Build first with `/build`.

## Usage

- `/benchmark asr` — transcribe test audio, report RTF
- `/benchmark tts` — synthesize test text, report RTF
- `/benchmark vad` — VAD on VoxConverse (all engines)
- `/benchmark diarize` — DER on VoxConverse (requires downloaded test set)

```bash
module="$ARGUMENTS"
cli=".build/release/speech"

case "$module" in
  asr)
    $cli transcribe Tests/Qwen3ASRTests/Resources/test_audio.wav 2>&1
    ;;
  tts)
    $cli speak "The quick brown fox jumps over the lazy dog." --output /tmp/bench_tts.wav 2>&1
    ;;
  vad)
    python3 scripts/benchmark_vad.py --compare --num-files 5 2>&1
    ;;
  diarize)
    python3 scripts/benchmark_diarization.py --num-files 5 2>&1
    ;;
  *)
    echo "Usage: /benchmark [asr|tts|vad|diarize]"
    ;;
esac
```

## Performance targets (M2 Max)

| Module | Metric | Target |
|--------|--------|--------|
| ASR (Qwen3) | RTF | ~0.06 |
| ASR (Parakeet) | RTF | ~0.025 |
| TTS | RTF | ~0.7 |
| VAD (Silero) | RTF | >20x real-time |
| Diarization | DER | <10% (VoxConverse) |

证据边界与执行链路

作者原文负责流程事实；流狐只索引当前章节、要点、文件与命令。

章节    -> Usage → Performance targets (M2 Max)
要点    -> Run benchmarks using the release build.
文件/命令 -> /build · /benchmark asr · /benchmark tts · /benchmark vad · /benchmark diarize
内容 SHA-256 -> 06446d3f01a4