Pasitelkdama pažangias natūralios kalbos apdorojimo (NKA) technologijas, „Neurotechnology“ sukūrė Kalėdų Senelio liniją – visiškai automatizuotą pokalbių sistemą, kuri per šventinį laikotarpį visą parą leido skambinti virtualiam Kalėdų Seneliui ir bendrauti su juo lietuvių kalba. Nors ši sistema buvo pramoginio pobūdžio, ta pati technologija gali būti tiesiogiai pritaikyta verslo poreikiams: automatizuotiems skambučių centrams, klientų aptarnavimui, registracijai ir pokalbių rezultatų fiksavimui.
- 24/7 Pasiekiamumas
- 5 skambučiai Apdorojami vienu metu
- 2 minutės Vidutinė skambučio trukmė
- 2 × NVIDIA H100 GPU plokštės serveryje
Projektas atskleidė praktinį „Neurotechnology“ natūralios kalbos apdorojimo galimybių pritaikymą, apjungiant balso transkripcijos (angl. Speech-to-Text, STT), didžiojo kalbos modelio (angl. Large Language Model, LLM) ir balso sintezės (angl. Text-to-Speech, TTS) technologijas. Vienu metu apdorodama iki 5 skambučių, kurių vidutinė trukmė siekė apie 2 minutes. Taip sistema parodė gebanti valdyti sudėtingus, natūraliai skambančius pokalbius ir kiekvienam skambinusiajam suteikti asmenišką bei džiugią patirtį, nepriklausomai nuo jo amžiaus. Linija buvo skirta įvairaus amžiaus naudotojams (jaunesni nei 14 metų vaikai turėjo skambinti prižiūrimi tėvų).
Rengdamasi šventiniam laikotarpiui, „Neurotechnology“ siekė sukurti pilnai veikiančią automatizuotą balso liniją, gebančią suprasti kontekstą ir atsakyti akimirksniu.
DI paremtas NKA procesas
Kalėdų Senelio linija užklausas apdorojo pasitelkdama balso transkripcijos technologiją; tuomet didysis kalbos modelis parengdavo atsakymą, o galutinis rezultatas buvo pateikiamas atliekant balso sintezę. Taip sistema galėjo suprasti užklausos esmę ir pateikti tikslų, kontekstu pagrįstą atsakymą. Tai buvo pirmoji automatizuota kalėdinė telefono linija lietuvių kalba, sukurta pasitelkus DI technologijas.
Sprendimo procesas atkartojo šiuolaikinių verslo skambučių centrų eigą.
Jį sudarė trys pagrindiniai technologiniai etapai:
1. Balso transkripcija
Vaikui ar suaugusiam prakalbus į telefoną, sistema pasitelkdavo „Neurotechnology“ balso transkripcijos technologiją ir garsą realiuoju laiku paversdavo tekstu. Ši technologija buvo pritaikyta lietuvių kalbai, todėl tiksliai atpažindavo kalėdinių norų niuansus – net ir tuos, kuriuos išsakydavo patys mažiausieji.
2. Konteksto suvokimas (didysis kalbos modelis)
Transkribuotą tekstą toliau apdorodavo didysis kalbos modelis. Šis etapas veikė kaip Senelio „smegenys“: sistema suprasdavo skambinusiojo ketinimą ir užklausą, prisimindavo pokalbio kontekstą ir pateikdavo nuoseklų bei tinkamą atsakymą. Dėl to pokalbis vykdavo natūraliai, o ne kaip iš anksto įrašytas šventinis sveikinimas.
3. Balso sintezė
Sugeneravus atsakymą, balso sintezės technologija tekstą vėl paversdavo garsu. Kalėdų Senelio balsas buvo apmokytas naudojant didelį duomenų kiekį, kad tonas būtų šiltas, o žinutė perteikta šventiškai ir maloniai.
„Neurotechnology“ natūralios kalbos apdorojimo (NKA) skyriaus techninis vadovas
NKA technologijų taikymas
Nors Kalėdų Senelio linija buvo šventinė paslauga, tas pats technologinis pagrindas yra naudojamas automatizuoti didelės apimties teksto ir balso srautų apdorojimą įvairiuose sektoriuose:
- Skambučių centrai ir klientų aptarnavimas: Registracija bankuose, baseinuose, grožio salonuose ir kitur, kur reikia užsirašyti tam tikroms paslaugoms. Sistemą taip pat galima apmokyti teikti išsamesnę informaciją apie produktus ir paslaugas.
- Valstybinės ir medicinos įstaigos: Visą parą teikiamos informacinės paslaugos ir automatizuota registracija, užtikrinanti greitesnę prieigą prie skubios pagalbos tada, kai jos labiausiai reikia.
- Žiniasklaida ir pramogos: NKA įrankiai gali padėti transkribuoti naujienų pranešimus, palengvinti subtitrų rengimą ir supaprastinti viso turinio kūrimą.
„Neurotechnology“ gali pritaikyti sistemą pagal individualius užsakovo poreikius. Tai apima sistemos mokymą naudotis konkrečia informacija apie užsakovą, jo siūlomas paslaugas ar produktus, siekiant užtikrinti tikslius ir klientui pritaikytus atsakymus.
Techninė įranga
Kad Kalėdų Senelio linija veiktų sklandžiai, „Neurotechnology“ sprendimą įdiegė vietinėje infrastruktūroje, naudodama dvi NVIDIA H100 GPU plokštes. Jos atliko didžiąją dalį balso ir teksto duomenų apdorojimo. Skambučių logikai ir vartotojų srautui valdyti (atsiliepti į skambučius, aptarnauti kelis vartotojus vienu metu ir užbaigti pokalbį) buvo reikalingas dar vienas serveris.
Panaši architektūra ir infrastruktūra gali būti pritaikyta verslo poreikiams, kai reikia visiškai automatizuoto DI balso asistento.
DI infrastruktūros inžinerija. Privatūs DI debesys. Gamybai parengtos DI sistemos.
Neurotechnology NKA produktai
„Neurotechnology“ kuria natūralios kalbos apdorojimo (NKA) sprendimus, skirtus didinti užduočių automatizavimą. Šie produktai leidžia tiek pavieniams naudotojams, tiek įmonėms tiksliai transkribuoti, analizuoti ir generuoti sakytinę kalbą.
Neurotechnology AI Platform – debesijoje veikiantis įrankis, skirtas natūralios kalbos apdorojimo užduotims. Platforma leidžia organizacijoms lengvai integruoti DI į savo veiklą per intuityvią API arba žiniatinklio sąsają.
Neurotechnology AI SDK – programinės įrangos kūrimo rinkinys (SDK), skirtas kūrėjams, norintiems patiems kurti natūralios kalbos apdorojimo sprendimus. SDK apima automatinio kalbos atpažinimo (ASR) variklį tikslioms transkripcijoms ir kalbėtojų atskyrimo variklį, kuris atpažįsta ir suskirsto garso įrašus pagal atskirus kalbėtojus.
padėti jums kurti bei diegti NKA pagrįstus sprendimus.
