Model RoBERTa 8k to polski model językowy oparty na architekturze transformer, przystosowany do przetwarzania długich kontekstów tekstowych o długości do 8 tysięcy tokenów. Został zaprojektowany z myślą o zadaniach związanych z analizą języka naturalnego, takich jak klasyfikacja treści, analiza sentymentu czy wykrywanie toksycznych wypowiedzi. Dzięki otwartemu podejściu do rozwoju technologii model stał się podstawą dla nowych narzędzi tworzonych przez społeczność i organizacje rozwijające polski ekosystem AI.
OPI rozwija modele typu Polish RoBERTa pod kątem zastosowania ich w sektorze bankowym wspólnie z PKO BP. Realizują projekt „Budowa innowacyjnych polskich domenowych modeli językowych i platformy usługowej do serwowania modeli wielozadaniowych wewnątrz Banku PKO BP”. Projekt otrzymał dofinansowanie z UE w kwocie 9,2 mln złotych, w ramach programu Fundusze Europejskie dla Nowoczesnej Gospodarki 2021-2027.Dzięki swojej skali inicjatywa ta będzie przełomowa dla sektora finansowego w Polsce. Klienci banku zyskają bardziej intuicyjną i efektywną obsługę, a pracownicy dostaną dodatkowe narzędzia usprawniające ich pracę.
Narzędzia IT, dane naukowe i e-learning – za darmo od OPI
RoBERTa 8k to nie jedyne narządzie, które można pobrać całkowicie za darmo na platformie HuggingFace. OPI już od kilku lat dzieli się efektami swojej pracy, aby przyspieszyć rozwój społeczeństwa informacyjnego w Polsce. Nasz instytut stawia nie tylko na rozwój branży IT, ale także wspiera polską naukę. W tym celu OPI udostępnił otwarte zbiory danych naukowych. Dotyczą one wielu, różnorodnych projektów badawczych instytutu. Skorzystać z nich mogą wszyscy badacze, bez względu na afiliację.
OPI wspiera także aktywnie proces uczenia się przez całe życie i dlatego udostępniamy wszystkim kod źródłowy naszej platformy NAVOICA. Jest to platforma LMS, która umożliwia tworzenie skalowalnych serwisów e-learningowych typu MOOC. Pozwalają one na tworzenie i realizację kursów w modelu asynchronicznym, przewidzianych dla dowolnej liczby odbiorców.
Zapraszamy do odwiedzenia zakładki „Otwarty dostęp”, gdzie znajdują się szczegółowe informacje o udostępnionych przez OPI danych i narzędziach IT.