Velma API는 감정, 의도 및 사기를 위해 실시간 음성 오디오를 분석합니다.
실시간 음성 오디오를 감정, 의도 및 사기 신호에 대해 분석하며, 전사에 의존하지 않고 원시 파형을 처리하여 1초 이내의 행동 경고를 가능하게 합니다. Modulate의 Velma API는 실시간 모니터링 및 에이전트 지원을 위한 오디오 네이티브 인텔리전스 API입니다. 주요 기능으로는 앙상블 리스닝 모델을 사용한 직접 오디오 분석, 화자 분리와 함께하는 전사, 딥페이크 탐지 등이 포함됩니다. 이는 음성 스트림에서 실시간 행동 신호가 필요한 개발자, 콜센터 팀 및 신뢰 및 안전 그룹에 적합합니다.
실제로 어떤 작업에 사용할 수 있나요?
Velma는 실시간 음성 분석 작업을 목표로 합니다: 150개 이상의 미리 설계된 프롬프트를 통한 행동 탐지, 20개 이상의 감정 레이블을 통한 감정 및 톤 분류, 타임스탬프가 포함된 화자 구분, 그리고 수정용 PII/PHI 태깅. API는 이러한 출력을 REST 및 WebSocket 엔드포인트를 통해 노출하여 라이브 음성 채팅, 에이전트 지원 워크플로우 및 통화 후 검토에 통합할 수 있습니다. 이러한 구체적인 출력은 사기 탐지, 준수 모니터링 및 라이브 스트림에서 고객 감정 측정에 적합하게 만듭니다.
수동 검토와 비교했을 때 출력의 정확도는 어떤가요?
개발자는 높은 전사 품질과 딥페이크 탐지에 대한 선도적인 벤치마크 위치를 보고하며, 제품은 텍스트만이 아닌 직접적인 오디오 분석과 전사를 결합합니다. 이러한 설계는 전사가 종종 생략하는 톤 및 리듬과 같은 신호를 보존하여 보다 미묘한 행동 레이블을 지원합니다. 전사 및 경고에 대해 종종 400ms 미만의 서브 초 대기 시간은 지연된 후처리보다 근실시간 결정을 가능하게 합니다.
어떤 파일 형식과 통합을 지원하나요?
Velma는 WebSocket 및 REST를 통해 실시간 오디오를 수용하며, Unity 및 Unreal을 포함한 모바일 및 게임 플랫폼에 임베딩을 지원합니다. 입력은 텍스트가 아닌 원시 오디오 스트림이므로, 녹음된 파일이나 라이브 음성에서 시작하는 워크플로우는 중간의 음성-텍스트 전용 단계를 거치지 않고 API에 직접 연결할 수 있습니다. 화자 구분 및 타임스탬프는 시간 정렬 검토를 위한 행동 태그와 함께 도착합니다.
기존 음성 워크플로우에 추가하는 것이 간단한가요?
API 표면은 개발자 및 제품 팀을 목표로 합니다: REST 및 WebSocket 인터페이스는 프로그래밍 호출 및 스트리밍을 허용합니다. iOS/Android 및 게임 엔진에 대한 통합이 지원되므로 라이브 모더레이션 또는 에이전트 지원이 필요한 팀에 적합합니다. 이 도구는 전사 후 분석 파이프라인을 오디오 우선 모델로 대체하므로, 엔지니어링 팀은 전사만 저장하는 것이 아니라 오디오 스트림을 서비스로 라우팅해야 합니다.
벨마는 실시간 오디오 우선 행동 신호가 필요한 엔지니어링 팀에 적합합니다
벨마는 실시간 음성에서 시간 정렬된 행동 감지 및 톤 분석이 필요한 팀에 유용합니다. 이는 원시 오디오를 처리하고 화자 구분, 감정 레이블 및 사기 플래그를 서브 초 지연으로 반환합니다. 정확성 주장은 전사 및 합성 음성 감지를 위한 벤치마크 배치에 기반하지만, 팀은 자동 경고를 단독 증거로 사용하기 전에 레이블을 도메인 데이터와 검증해야 합니다.
