Сбер: PyTorch-LifeStream Программная библиотека

Основная статья: Управление данными (Data management)

2022: Предоставление разработчикам бесплатного доступа к PyTorch-LifeStream

1 февраля 2022 года «Сбер» сообщил, что предоставил разработчикам бесплатный доступ к инструменту подготовки датасетов.

«Сбер» сделал открытым инструмент - программную библиотеку PyTorch-LifeStream, содержащую несколько алгоритмов построения эмбеддингов событийных данных. Инструмент может быть использован для подготовки различных массивов обезличенных данных (датасетов).

Событийные данные могут представлять собой разные последовательности - истории посещений сайтов, истории покупок, событий в онлайн-играх и так далее. При этом, сгенерированный на основе алгоритмов библиотеки эмбеддинг такой последовательности не будет содержать каких-либо персональных данных.Как с помощью EvaProject и EvaWiki построить прозрачную бесшовную среду для успешной работы крупного холдинга 2 т

В библиотеке реализован алгоритм применения нейросетевого контрастного обучения к событийным данным, созданный и запатентованный в Лаборатории по искусственному интеллекту «Сбера». Кроме того, в библиотеке реализованы методы на основе сторонних научных публикаций, но адаптированные «Сбером» к событийным данным.

«Недостаток очищенных, обезличенных и размеченных данных - это один из главных барьеров для дальнейшего развития искусственного интеллекта, для создания новых продуктов и сервисов, которые смогут решать важные научные и социально значимые задачи. Но существуют инструменты, которые позволяют готовить такие данные. Свободный доступ к этим инструментам - важное условие для преодоления барьера. Уверен, что вывод нашей библиотеки в паблик ускорит разработку и внедрение систем искусственного интеллекта в России и, как следствие, будет содействовать конкуренции и экономическому развитию нашей страны», - говорит Александр Ведяхин, первый заместитель Председателя Правления «Сбербанка».

«Сбер» уже давно делится результатами своих исследований в области искусственного интеллекта со всеми желающими. В частности, ранее компания вывела в открытый доступ такие библиотеки, как ruGPT-3, LAMA, RePlay, ruDALL-E.