??? ???? ????? ?? ??? ???? ?? ?? AI ??

?????? ??? ?? ??? ???? ??? ?? ??? ????? ???, ??? ??? ?? ? ????? ????. ? ??? ??, ?? ? ????? ??? ??? ??? ?? ? ????.

Gartner? ???, ??, ??? ?? ??, ?? ?? ????? ??? ?? ???? ?? 2030??? ??? 80%? ?? ??? ??? ???? ? ???, ?? ??? 10% ???? ??? ??? ?????.

??? ??? ???? ??? ?? ??? ? ?? ??? ?? AI ?? ?? AI ?????? ??? ??? ?? ????? ?? ?????. ???? ?? ?? ??(ASR) ? ??? ?? ??(TTS)? ??? ??? ???? ???? ??? ??? ???? ?? ???? ?? ?? ?? ??? ???? ????. ??? ?? ?? ??? ?? AI? ?????.

? ?????? ??? ?? ???????? ASR ? TTS? ???? ??? ?????. ?? AI ????? ??? ???? ??? ???? ??? ?? ??? ?? ??, ?? ? ??? ?? ?? ???? ??? ??? ?????.

??? ?? ??????? ?? AI? ???? ??? ??????

??? ??? ??? ???? ????? ?? ???? ????? ??? ??? ????. ??? ??? ??? ?? ???? ????, ??? ??? ?? ??? ??? ????, ??? ???? ??? ??? ??? ? ????. ?? ??, ??????? ??? ??? ??? ????, ??? ?? ??, ??? ?? ? ????.

??? ?? ??? ??? ??? ?? ???? ???? ????? ???? ????? ???? ?? ??? ?? AI? ???? ???.

?? AI ?? ??? ?? ??????? ??

??? ??? ??? ??? ???? ???? ????.

??

??? ?? ?? ???? ? ????? ??? ???? ????. ???? ?? ??? ?? ?? ?? ???? ?? ??? ??? ??? ???? ??? ??? ??? ???? ? ???? ??? ??? ? ????.

??

???? ??? ??? ?? ?? ??? ???? ?? ?? ?? ???? ??? ??? ? ????. ?? ??, ?? AI ?? ??? ??? ??? ???? ???? ??? ?? ??? ?? ?? ??? ???? ? ??? ? ? ????.

?? ?? ??(ASL)

?? ?? ?? ???? ??? ?? ?? ?? ?? ??? ??? ??? ???? ? ?? ?????. ??? ??? ? ???? ?? ??? ?? ???? ????? ??? ?? ?? ????? ???? ??? ??? ???? ?? ?? ??? ??? ? ????. ?? AI ??? ???? ??? ??? ??? ??? ??? ? ????.

??? ?? ???? ????

??? ??? ??? ???? ??? ?? ??? ???? ???? ?? ? ??? ?????.

• ?????? ?? ???? ???? ?? ??? ???? ?? ??? ??
• ????? ??? ??? ??? ?? ? ??? ??
• ???? ?? ???? ???? ???? ??? ??? ??

??? ????? ??? ???? ???? ??? ???? ???? ??? ? ??? ???. ?? ??? ?? ????? ??? ??? ??? ? ?? ????? ?? ?????. ??? ????? ??? ? ?? ??? ??? ??????? ?? ???? ??? ???? ?????.

?? 1? ??? ??? ?? ??? ???? ???? ?? ???? TTS? ?? ?? ???? ????? ???? ?? ?????. NLP ? ?? ???? ?? ?? ?? ??? ??? ??? ????? ???? ??? ??? ?? ??? ??? ???? ? ?????.

?? ??, ?? ? ??? ?? ?? ???? ??? ??? ??? ??? ???? ??? ???? ????? ?????.

??? ??? ?? ?? ??? ?????

?? ??? ??????? ?? ?? ??? ??? ?? ????? ? ?? ?? ?? ??? ?????. ?? ??? ?????? ?? ?? ?? ??? ?? ??? ???? ???? ?????. ?? ?????? ?? ??? ?? ??? ???? ??? ??? ? ?? ???? ???? ?????.

?? AI ????? ???? ???? ?????. ?? ??, ??? ??? ????? ???? ??, ????, ????? ?? ??? ??? ? ??? ???. ??? ??? ??????? ?? ???? ??? ???? ??? ??? ?? ??? ???? ????? ??? ? ??? ???.

??? ??? ??? ???? ?? ??? ?? ??? ??? ???? ?? ? ??? ???. ?? ? ???? ?? ??? ?????, ??? ???? ????? ???? ???? ???.

?? ?? ??

ASR ??????? ? ?? ?? ??? ??? ??? ????.

• ?? ???? ?? ???? ?????? ?? ? ???????? ?????.
• ?? ??? ??? ???????? ? ?? ???? ?? ?? ??? ??? ?? ??? ?????.
• ???? ?? ??? ??? ??/??? ??????? ?????.
• ??? ? ??? ?? ??? ??? ??? ??, ???, ??? ?? ??? ???? ???? ????.

??? ?? ??

TTS ??????? ? ?? ?? ??? ??? ??? ????.

• ??? ??? ? ?? ?? ???? ???? ???? ??? ?????. ?: “10:00?” -> “10??”
• ??? ??? ??? ???? ???? ??? ?????.
• ??? ??? ?? ??? ??? ??? ???? ?? ?? ??? ??? ??? ???? ? ??? ??? ?????.
• ?????? ???? ???? ?? ? ?? ?? ??? ???? ???? ??????? ?????.
• ??? ??? ??????? ???? ???? ??? ??? ? ?? ??? ?????.

?? AI ????? ???

NVIDIA? ?? ? ?? ?? AI ?????? ???? ? ??? ?? ??? ?????, ?? ? SDK? ?????. ??? ?? ??, ?? ? ??? ?? ?????? ?? ???? ??? ??? ???? ????? ???? ?? ??? ? ? ????.

?????

NVIDIA? ?? AI ??? ????? ????? ?? Mozilla Common Voice(MCV)? ??? ??????. MCV? ???? ?? ?? ??? ???? ? ??? ? ?? ?? ?????? ?? ???? ???? ???? ?? ???????. MCV?? ??? ?? ??? ?????? ?????? ASR ? TTS ??? ??? ? ????.

?? NVIDIA? ?? ???? ??? ?? Defined.ai? ??? ??????. ?? AI ??? ???? ?? ?? ??, ?? ? ??? ??? ? ?? ?? ???? ????? ? ????.

?? ??? ??

NGC? ??? ??? ? ?? ?????? ?? ????? ?? ?? ?? ??? ??? ?????. ?? ??? ??? ?? ?? NVIDIA DGX ???? ??? ? ?????????.

???? ?? ?? ??? ??? ?? ??????? ?? ???? ???? ?? ?? ? ????.

?? ?? ??

?? ?? ??? ?? ?? ?? NVIDIA??? ??? AI ?? ? ?? ??? ???? ?????? ?? ?? ?????? NeMo? ?????. NeMo? PyTorch ? PyTorch Lightning? ???? ???? ?? ??? ??? ???? ???? ??? ? ????.

?? AI SDK

?? GPU ?? ?? AI SDK? NVIDIA Riva? ???? ??? ?? ??? ??? ??? AI ?????? ?? ? ?????. Riva? NGC? ?? ??? ???? ?? ??? ??? ??? ?? ??? ?????.

• ??
• ????
• ???
• ???
• ????
• ???
• ???
• ????
• ?????

???, ???, ?????? ? ?????.

NeMo? ???? ??? ??? ??? ??? ?? ??, ??, ?? ? ??? ?? ?? ??? ??? ???? ?? AI ??? ?? ??? ? ????.

?? ????, ?????, ?? ? ???? ?????? ???? ?? ?????? Riva ??? ??? ? ????.

???? ??????? ?????? Riva ?? AI ?? ??

? ????? ???? ?????? Riva? ?? ?? ASR ? TTS ??? ???? ??? ??? ? ????. Riva? ???? ???? ??? ???? ?? ???? ??????? ??? ?? ????? ?? ??? ?? ????.

???? ? ???? ?? ???? Riva ?? AI ??? ??? ? ????. ?? ?????? Riva ??? ???? ?????.

?? ??

• NGC ???.
  • ??? ?????(CLI)?? ?? ??? ???? ngc ??? ?????.
• NVIDIA Jetson Orin, NVIDIA Jetson AGX Xavier ?? NVIDIA Jetson NX Xavier ???.
• Jetson ??? NVIDIA JetPack ?? 5.0.2.

??? ??? ?? ??? ?????.

?? ??

?? ??? ???? NGC?? ????? ???????.

ngc registry resource download-version nvidia/riva/riva_quickstart_arm64:2.7.0

Riva ?? ???:

bash riva_init.sh

Riva ?? ??:

bash riva_start.sh

?? ??? ?? ??? ??? ?? ?? ???? ?????.

C++ ASR ????? ??

????? Riva ??? ??? ???? ? ???? ??? ? ?? ?? ?????? ?? ?????.

ASR ????? ?? ?? ??? ?????.

riva_streaming_asr_client --audio_file=/opt/riva/wav/en-US_sample.wav

??? ?? ??, ??, ?? ? ??? ?? Riva ASR ?? ? ?????? ?? ???? ?? ?? ??? ??? Riva ???? ?? ?? ??? ?????.

C++ TTS ????? ??

???? Riva TTS ?????? ?? ?? ??? ???? ??? ??? ?????.

riva_tts_client --voice_name=English-US.Female-1 \
                --text="Hello, this is a speech synthesizer." \
                --audio_file=/opt/riva/wav/output.wav

???? ??????? TTS ?? ? ?????? ?? ???? ?? ?? ??? ??? Riva ?? ???? ?? ??? ?????.

?? AI ?????? ??? ???

?? AI? ??? ?? ? ?? ????? ??????? ??? ??? ??? ???? ?? ??? ? ??? ?????.

????? ???? ?? ???? ?? ??? ??? ??? ????? ?? ??? ??? ???? ????. ?? AI ??? ??? ??? ??? ? ?? ?? ?? ??? ?????? ????? ?? AI ????? ?? ?? ?? ?? ??? ?????.

?? ?? AI ???? ???? ?? AI ??, ?? ?? ?? ??? ?, ??? ASR ??????? ?? ?????.

?? ?? ? ?? ?? AI ????? ?? ??? E-Book? ????? ?? AI ????? ? ?? AI ?????? ?? ??? ??? ?? ??? ???? ??????? ?? ??? ?? AI ?????? ???? ???? ??? ?? ????? ?? ? ????.

? ???? ??? SDK? ???? ?? ???, ?? ???, ?? ??, ??, ?? ??, ???? NVIDIA ??? ???? ??? ??? ??? ??? ? ????. ?? ??? ???? NVIDIA? ?? ????? ???? ? ??? ??? ??? ?????? ???? ??? ??? ???.