?? ??? ???? ??? ???? NVIDIA ?? AI ??

Reading Time: 3 minutes

NVIDIA? ?? AI? ?? ?? ???? ?? ??? ???, ???? ????? ?? ?? ??(ASR)? ???? ??? ???? ??? ??? ????.

NVIDIA Parakeet TDT 0.6B v2? ??? ?? ??? ?? ??? 6? ???? ??? ASR ???, ?? Hugging Face ASR ?????? NVIDIA Parakeet ?? ?? 4? ??? ?? ?? 1?? ???? ????. ??, NVIDIA NeMo Canary ?? ?? Hugging Face ASR ?????? ??? ???? ????.

? ???? ??? ??? NVIDIA ?? AI ???? ??? ???, ??, ?? ?? ??? ??? ??? ??? ??? ?????. ??? ?? ??? ???? ??, ?? ?? ???? ???? ?? ???? ? ???? ??? ??? ? ??? ???????.

NVIDIA ?? AI ?? ??

NVIDIA Parakeet ? Canary ??? NVIDIA Riva? ??? ?? ????, ?? ?? ??? ??? ??? AI ????? ??? ?? GPU ?? ??? ?? ? ?? ??????? ?????.

Riva ?? ??? ?? ??? ??????? ??? ?? ??? ?? ??? ?? ??? ??? ?????. ?? ? ???? NVIDIA NIM ???????? ?????? ?? ??? ??? ???? ???? ?? ?? ??? ?? ?????.

??? NVIDIA ??? ?? ??? ?? ?? ???? ?? ?, Riva? ?? ??? ???? ?? ??? NIM ??? ????, ??? ???? ?????. ?? ??? ??? ?? ???, NVIDIA? Joey Conway ?? ?? ?? ????? ?? ???? ?????.

NVIDIA Parakeet v2 ?? ?????

Parakeet v2? ?? ?? ??? 6.05%? ?? ???(WER)? ????, ???? ??? ?? ??(RTFx 3386.02, ?? ?? ? 50? ??)? ???? ?? ?? ?? ??, ??-?? ?? ? ???? ??? ?????. ? ??? ????? ???? ??? ??? ??? ?????.

?? ASR ???? ??, ???, ?? ?? ? ??? ??? ? ???? ?? ??, Parakeet v2? ? ?? ??? ??? ?? ??? ??? ???? ??? ???? ?????? ??? ??????.

??? 1. NVIDIA Parakeet v2? ???? ?? ??-?? ?????? ??

NVIDIA NeMo Canary ?? ?????

NVIDIA NeMo Canary ?? ?? Hugging Face ASR ???? ???? ???? ????. ?? NVIDIA NeMo Canary 1B? NVIDIA NeMo Canary 1B Flash? ?? 4?? 3?? ?? ???, ??? ?? ??? ?? ?? ???? ??? ????. ? ???? ?? ??? ?? ?? ? ?? ????? ????? ???? ????.

*?? 1. ?? ?? ???? Hugging Face Open ASR ?????? ???? ?? ?? NVIDIA Parakeet ? Canary ??.*

NVIDIA ?? AI ??? ?? ?? ? ?? ??

?? NVIDIA ?? AI ??? ?? ??? ????? ????. Recurrent Neural Network Transducer(RNNT) ?? ??? ??? ? 25? ??? ??? ??? ??? ?? ??? ???? ????.

???? ?? ? ??? ?? ????? ??? ??? ??? ??, ??? Silero VAD ??? ???? ??? ?????. ?? ?? WER? ??? Parakeet v2? ??? ??? ??? ?? ?? ?? ?? ?? ??? ?????.

?? ??? ? ?? ???? ?? ????, NVIDIA? ??? ?? Riva NIM ???????? ?????.

Parakeet RNNT 1.1B: 25? ??? ???? ????? ???? ??? ??? ?? ??
Parakeet CTC 1.1B: Silero Voice Activity Detector(VAD)? ???? ?? ???, ??? ??? ?? ?? ??
Parakeet CTC 06B: 6? ???? ??? ?? ???, 35,000?? ??? ?? ??? ?? ??? ?? ????? ??? ?? ??

??? 2. ? ?? ???? ?? ???? 1?? ??? NVIDIA Parakeet TDT 0.6B v2 ??? ?? ??? ?????.

NVIDIA ?? ??? ??? ???? ?? ??? ?? ??? ? ??? ???? ???, Riva ??? NVIDIA AI Enterprise, NVIDIA NGC, NVIDIA NIM ??????? ??? ?????. ?? ??? ??? Hugging Face?? ????? ? ????.

???	????	?? ??	?? ??	?? ??
Parakeet TDT 0.6B v2	FastConformer-TDT	?? (en-US)	?? ?? WER, ???, ?? ?? ?????, ??-?? ??, ???	???·??????, ?? ? IoT
Parakeet RNNT 1.1B	FastConformer-RNNT	25? ??	?? ?????, ??? ??, NVIDIA NIM	??? ?? ??, ??? ??
Parakeet CTC 1.1B (Silero VAD)	FastConformer-CTC	?? (en-US)	?? ASR, ?? ?? ??, Silero VAD, ????, ???	?? ?? ? ??? ??? ?, ??·?? ? ?? ?? ??
Parakeet CTC 06B	FastConformer-CTC	?? (en-US), ???? (es-US)	?? ASR, ASRSet ? 35,000?? ?? ??, ??? ??, ??·?????? ??, ?? ??	??·?? ??? ??? ??, ???, ?? ????

? 1. NVIDIA Parakeet ?? ??

NVIDIA ?? AI ?? ????

???? ??? ????? ?? NVIDIA Parakeet ASR ??? ??? ?? ??, ?? ?? ??, ?? ?? ??? ??? ???? ???? ?? ?? ??? ??? ?? ??? ????. ??? ??? ???? ?????, ??? ?? ??? ?????, ??? ??? ??????? ?? ????, Parakeet ??? ??? ???? ??? ??? ??? ??? ????.

?? ?? NVIDIA Parakeet v2? ????? Riva ?? ?? NIM? ??????. ?? ??, ?? ??? ? ??? ??? NGC Catalog?? ??? ? ????.

?? ???