Należą do nich NVIDIA Nemotron-3 4.5B, pierwszy SLM firmy, który został zaprojektowany specjalnie do działania na urządzeniach z podobnym poziomem precyzji i dokładności, jak duże modele językowe (LLM) działające w chmurze. Nemotron-3 4.5B SLM jest już w fazie wczesnego dostępu. Modele urządzeń NVIDIA Audio2Face i NVIDIA Riva ASR będą wkrótce dostępne we wczesnym dostępie. Nowy zestaw programistyczny NVIDIA AI Inference Manager upraszcza wdrażanie ACE na komputerach PC. Wstępnie konfiguruje komputer PC z niezbędnymi modelami, silnikami i zależnościami AI, jednocześnie płynnie koordynując wnioskowanie AI na komputerach PC i w chmurze.
Pakiet cyfrowych technologii generatywnej sztucznej inteligencji NVIDIA ACE, obecnie ogólnie dostępnych, obejmuje:
- NVIDIA Riva ASR, TTS i NMT — do automatycznego rozpoznawania mowy, konwersji tekstu na mowę i tłumaczenia
- NVIDIA Nemotron LLM — do zrozumienia języka i generowania odpowiedzi kontekstowych
- NVIDIA Audio2Face — do realistycznej animacji twarzy opartej na ścieżkach dźwiękowych
- NVIDIA Omniverse RTX — realistyczna skóra i włosy śledzone w czasie rzeczywistym
Nowo ogłoszone technologie obejmują:
- NVIDIA Audio2Gesture — do generowania gestów ciała na podstawie ścieżek audio, dostępna wkrótce
- NVIDIA Nemotron-3 4.5B — nowy model małego języka (SLM) stworzony specjalnie z myślą o wnioskowaniu z komputera RTX AI na urządzeniu z niskimi opóźnieniami
- „Cyfrowi ludzie zrewolucjonizują branżę” – powiedział Jensen Huang, założyciel i dyrektor generalny NVIDIA. „Przełomy w wielomodalnych modelach wielkojęzykowych i grafice neuronowej — dostarczane przez NVIDIA ACE naszemu ekosystemowi programistów — przybliżają nas do przyszłości obliczeń opartych na intencjach, w których interakcja z komputerami jest tak naturalna jak interakcja z ludźmi”.
Cyfrowi ludzie przybywają do 100 milionów komputerów PC z RTX AI
Do tej pory NVIDIA dostarczała mikrousługi ACE jako NIM dla programistów do pracy w centrach danych. Obecnie NVIDIA tworzy mikrousługi ACE PC NIM do wdrożenia na 100 milionach zainstalowanych komputerów stacjonarnych i laptopów RTX AI.
Należą do nich NVIDIA Nemotron-3 4.5B, pierwszy SLM firmy, który został zaprojektowany specjalnie do działania na urządzeniach z podobnym poziomem precyzji i dokładności, jak duże modele językowe (LLM) działające w chmurze. Nemotron-3 4.5B SLM jest już w fazie wczesnego dostępu. Modele urządzeń NVIDIA Audio2Face i NVIDIA Riva ASR będą wkrótce dostępne we wczesnym dostępie.
Nowy zestaw programistyczny NVIDIA AI Inference Manager upraszcza wdrażanie ACE na komputerach PC. Wstępnie konfiguruje komputer PC z niezbędnymi modelami, silnikami i zależnościami AI, jednocześnie płynnie koordynując wnioskowanie AI na komputerach PC i w chmurze.
Zaktualizowana wersja demo technologicznego Covert Protocol, opracowanego we współpracy z Inworld AI, zostanie zaprezentowana na targach COMPUTEX. Wykorzystując Audio2Face i Riva ASR działające lokalnie na komputerach PC wyposażonych w kartę GeForce RTX, wersja demonstracyjna umożliwia graczom interakcję i wpływanie na cyfrowe postacie, których nie można grać (NPC), za pomocą języka konwersacyjnego, aby ukończyć ich misję.
Cyfrowy ekosystem człowieka rozwija się dzięki najnowszym technologiom ACE
ACE robi furorę dzięki programistom tworzącym różnorodne aplikacje takich firm jak Aww Inc., Dell Technologies, Gumption, Hippocratic AI, Inventec, OurPalm, Perfect World Games, Reallusion, ServiceNow, Soulbotix, SoulShell i UneeQ.
Aww Inc., pionierska firma zajmująca się wirtualnymi ludźmi z siedzibą w Japonii, w 2018 roku wprowadziła na rynek swoją pierwszą wirtualną gwiazdę, Immę. Od tego czasu Imma stała się twarzą największych światowych marek w ponad 50 krajach. Teraz Aww Inc. planuje wykorzystać mikrousługi ACE Audio2Face do animacji w czasie rzeczywistym, umożliwiając wysoce interaktywną komunikację z użytkownikami.
Perfect World Games, twórca i wydawca gier, wykorzystuje ACE w swoim nowym demo technologicznym poświęconym mitologicznej dziczy, Legends. Gracze mogą wchodzić w interakcję z w pełni interaktywnym, realistycznym, wielojęzycznym NPC AI w języku angielskim i mandaryńskim. Korzystając z NVIDIA Audio2Face NIM, reakcje dźwiękowe postaci generują realistyczną animację twarzy w czasie rzeczywistym.
Inventec, duża firma technologiczna, która dużo inwestuje w sztuczną inteligencję, używa NVIDIA Audio2Face NIM do ulepszenia swojego agenta sztucznej inteligencji dla sektora opieki zdrowotnej na platformie VRSTATE. Integracja zapewnia bardziej wciągające i komfortowe doświadczenie wirtualnych konsultacji. Na targach COMPUTEX firma Inventec prezentuje agenta AI, który może pomóc pacjentom uzyskać dostęp do informacji o ich zdrowiu.
ServiceNow, platforma AI do transformacji biznesowej, zaprezentowała niedawno ACE NIM w demonstracji agenta usług generatywnej AI w ramach Now Assist Gen AI Experience, podkreślając potencjał cyfrowych awatarów w zakresie poprawy interakcji z klientami i pracownikami w różnych branżach, w tym handlu detalicznego, podróży i nie tylko.
W zeszłym miesiącu firma Dell Technologies zaprezentowała najnowocześniejsze rozwiązanie Dell Generative AI dla asystentów cyfrowych na targach Dell Technologies World. Oferta umożliwia firmom wykorzystanie inteligentnych asystentów cyfrowych, którzy angażują klientów poprzez naturalne rozmowy w różnych branżach, takich jak handel detaliczny, opieka zdrowotna i obsługa klienta.
NVIDIA świętuje cyfrowe start-upy ludzkie na targach COMPUTEX 2024
Zespoły graficzne firmy NVIDIA wykorzystały narzędzia generatywnej sztucznej inteligencji oparte na ACE, w tym Synthesia i Hour One, do stworzenia „cyfrowego awatara Jensena”, który został wygenerowany na podstawie wideo z tekstu.
Wielojęzyczny awatar przedstawiał unikalny głos i styl Huanga, wygenerowany przez zastrzeżoną przez ElevenLabs technologię mowy i głosu AI w języku chińskim mandaryńskim i angielskim. NVIDIA współpracowała także z firmą Voicemod, członkiem NVIDIA Inception specjalizującym się w technologii głosowej AI, aby skomponować końcową piosenkę przewodnią przemówienia Huanga.
ACE NIM już dostępny
Mikrousługi NVIDIA ACE NIM do wdrożeń serwerowych, w tym Riva i Audio2Face, są już w fazie produkcyjnej, a dodatkowo dodają oprogramowanie NVIDIA AI Enterprise dla programistów, aby mogli otrzymać wsparcie klasy korporacyjnej. Zarejestruj się, aby uzyskać wcześniejszy dostęp do mikrousług ACE NIM działających na komputerach RTX AI.