AiHummer
Dansk
Log indKonto
v1.1.x
{ }Swagger

Tale ind og ud (STT / TTS)

v1.1.x · opdateret 2026-07-05

AiHummer håndterer tale ind og tale ud af boksen — ingen betalt tale-API kræves. Et indkommende lydklip transskriberes (STT), teksten styrer en normal agenttur, og svaret bliver talt tilbage (TTS). Begge motorer er gratis og lokal og kør som sidevogne: faster-whisper til transskription og edge-tts til syntese.

Hvordan en stemmeomskifter fungerer

Et stemmeskift er et normalt agent-skift med lyd på begge ender:

  1. Gatewayet sender den indgående lyd til STT sidevogn (:8001, faster-whisper) og får teksten tilbage.
  2. Den tekst driver den sædvanlige funktionskalds-turn — samme router, orkestrator, værktøjer og hukommelse som en tekstbesked.
  3. Svarteksten sendes til TTS sidecar (:8002, edge-tts) og den talt lyd returneres til opkalderen.

Dette er eksponeret som et enkelt endepunkt, POST /v1/voice/turn, så en kanal eller klient kan overlevere lyd og modtage lyd uden selv at orkestrere trinnene.

Endepunkterne

Metode Endepunkt Formål
POST /v1/voice/turn Lyd ind → agentens tur → lyd ud
GET /v1/voice/config Nuværende stemmekonfiguration (motorer, justeringsknapper)
POST /v1/voice/turn HTTP/1.1
Host: localhost:8780
Content-Type: application/json

{
  "audio": "<base64-encoded clip>",
  "format": "wav"
}

[!NOTE] Taleegenskaber er en del af kerne — de er ikke bundet til SIP-plugin’et. SIP-kanal bruger disse samme STT/TTS-motorer til sin local motor, men stemme ind/ud virker for enhver klient, der ringer /v1/voice/turn.

Stemme-sidecars

Havn Sidevogn Motor Rolle Forbundet med
8001 STT hurtigere-hvisken tale → tekst AIHUMMER_STT_URL
8002 TTS edge-tts tekst → tale AIHUMMER_TTS_URL

Begge motorer er gratis og lokale: intet sendes til en betalt taleudbyder. Som med enhver sidevogn, når gatewayen dem ved URL, så du kan køre dem ved siden af gatewayen eller på en delt instans.

Ledningsføring

Den host-native installer indstiller STT- og TTS-URL’erne for dig. De er katalogindstillinger — ændre dem fra admin-brugergrænsefladen (Administration → Indstillinger) eller med aihummer settings set; gateway.env er kun bootstrap og ignoreres for disse:

# Voice in/out (auto-configured by the installer)
aihummer settings set AIHUMMER_STT_URL http://127.0.0.1:8001
aihummer settings set AIHUMMER_TTS_URL http://127.0.0.1:8002

[!TIP] Fordi hver sidevogn kun er en URL, kan flere gateways dele én STT/TTS forekomst. Centraliser de tungere tale tjenester i stedet for at køre en kopi pr vært.

Indstilling af lydvejen

Stemmekvalitetsknapper lever i Medier · Stemme indstillingsgruppe og kan konfigureres fra webadministrationsbrugerfladen — ingen genudrulning nødvendig. De dækker den realtids lydsti:

Knop Hvad det styrer
Dupleks Full-duplex (lyt mens du taler) vs half-duplex
AEC Akustisk ekkoudsletning
Støjundertrykkelse Filtrerer baggrundsstøj før STT
AGC Automatisk forstærkningskontrol (niveau normalisering)
VAD-tærskel Følsomhed for stemmeaktivitetsdetektion
Afbryd Lad opkalderen afbryde agenten midt i svaret

GET /v1/voice/config returnerer den effektive konfiguration, så en klient kan opdage de aktive motorer og disse indstillinger.

Hvor til næste