Входящая в группу «Россельхозбанка» компания R-Style Softlab сообщила о выпуске на российский рынок нового продукта R-Style Intelligent System (RSIS), предназначенного для работы с данными и организации долгосрочного их хранения средствами СУБД ArenaDataDB, GreenPlum, PostgreSQL.

RSIS позволяет собирать и аккумулировать данные из различных источников, обрабатывать их и визуализировать полученные результаты, что способствует принятию эффективных управленческих решений. В основу платформы положена датацентричная реализация с применением методологии Data Vault («Свод данных»). По заверениям разработчика, такой подход обеспечивает высокую скорость загрузки и обработки данных.

Источник изображения: our-team / freepik.com

В числе прочих особенностей R-Style Intelligent System называются совместимость программного комплекса с отечественными решениями класса Business Intelligence (BI), поддержка потоковой и пакетной загрузки данных, в том числе механизмов взаимодействия с пакетом Apache Hadoop, возможность интеграции с партнёрскими решениями на базе искусственного интеллекта. Для обеспечения актуальности и качества данных возможно применение методологии Data Governance.

«Мы придерживаемся комплексного подхода к автоматизации работы с данными. Наш продукт совместим с отечественными BI-инструментами. Благодаря применению готовых решений партнёров, система может дополняться функциями для управления потоками данных, обеспечения мобильности, построения моделей данных, применения AI-технологий и т. д. По требованию заказчика мы можем также предоставить оборудование и системное ПО», — отмечает компания-разработчик платформы RSIS.

Команда разработчиков «Яндекса» опубликовала исходный код масштабируемой платформы распределённого хранения и обработки больших данных YTsaurus.

YTsaurus разрабатывается компанией с 2010 года и является одним из ключевых элементов внутренней IT-инфраструктуры «Яндекса». В основу платформы положен набор связных подсистем: MapReduce, движок SQL-запросов, планировщик, KV-хранилище данных для OLTP. YTsaurus поддерживает работу с десятками тысяч серверов, обработку эксабайтов данных на разных носителях, а также интеграцию с ClickHouse и Apache Spark. Благодаря широкой функциональности платформа может быть использована для широкого круга задач — от аналитики и построения хранилищ данных до обучения сложных ИИ-моделей с миллиардами параметров.

Сценарии использования YTsaurus

«Платформа YTsaurus отлично зарекомендовала себя в «Яндексе». Теперь мы сделали её доступной и за его пределами. Наибольшую пользу YTsaurus может принести крупным компаниям, которые обрабатывают гигантские объёмы данных на тысячах серверов в условиях постоянно возрастающей нагрузки. Мы уверены, что публикация кода выведет платформу на новый виток развития, как это уже было с другими нашими продуктами», — отмечает «Яндекс».

Исходный код и документация YTsaurus доступны на площадке GitHub. Код распространяется под лицензией Apache 2.0. Использовать платформу или доработать её под себя может любой желающий.

Новый департамент больших данных и искусственного интеллекта возглавил Сергей Сергиенко, до этого работавший советником министра. Курирует структуру профильный заместитель министра цифрового развития Григорий Борисенко.

Григорий Борисенко рассказал TAdviser, что профильные направления департамента отвечают за такие вопросы, как создание разных продуктов внутри ведомства с использованием данных, например, «фабрики данных», цифровые профили. Также в зону ответственности входят создание инфраструктуры для предоставления датасетов для обучения ИИ, анализ и работа над устранением нормативных и процессных барьеров, связанных с развитием и внедрением ИИ в госуправлении и в различных отраслях.

Источник изображения: Gerd Altmann / pixabay.com

Департамент отвечает, в том числе, за национальную систему управления данными (НСУД), за систему межведомственного электронного взаимодействия (СМЭВ) и различные аспекты перевода госуправления на цифровую основу. Ранее ответственность за них была распределена по разным департаментам. Департамент больших данных и искусственного интеллекта, 19-й по счету, был сформирован в конце 2022 года.

Компания «Диасофт» сообщила о расширении функциональных возможностей технологической платформы Digital Q.DataFlows, предназначенной для управления данными в корпоративной среде.

Программный комплекс Digital Q.DataFlows состоит их трёх компонентов Data Catalog, Data Streamer и Data Quality, обеспечивающих решение разнообразных задач аналитической обработки информации. Платформа формирует полное представление о том, какими данными располагает организация, и как они взаимосвязаны, позволяет создавать и выполнять процессы преобразования и транспортировки данных между IT-системами, а также обеспечивает мониторинг метрик качества данных, их актуализацию и встраивание инструментов контроля в процессы обработки данных. Поддерживается взаимодействие с различными источниками и массивами данных.

Источник изображения: diasoft.ru

Ключевым нововведением Digital Q.DataFlows стал инструмент Data Lineage для отслеживания происхождения данных и их потоков — маршрутов, по которым информация перемещается между внешними сущностями, процессами и хранилищами данных. С его помощью аналитики и специалисты по Big Data могут определять источники и местонахождение данных, взаимосвязи между ними и их потоками, отслеживать изменения, которые происходят в процессе трансформации данных, выявлять ошибки и причины их возникновения, а также определять ответственных за работу с той или иной информацией.

Решение Digital Q.DataFlows создано на базе микросервисной архитектуры и встраивается в IT-ландшафт любой организации.

ООО РТК ИТ, одна из структур «Ростелекома», по сообщению газеты «Коммерсантъ», в ноябре 2022 года учредило компанию «Тдата». Ей предстоит заняться развитием технологий хранения и обработки данных, которые смогут стать альтернативой решениям ушедших из России SAP и Oracle. Известно, что компанию «Тдата» возглавил директор по продажам сегмента продуктов по управлению данными «Ростелекома». Новое предприятие создаётся под «Платформу управления данными» — это универсальный набор отечественных программных продуктов для построения хранилищ данных и аналитики.

Известно, что работа по обособлению бизнеса ведётся совместно с одним из партнёров «Ростелекома». По мнению участников рынка, появление «Тдата» поможет привлечь новых заказчиков. Структура, как отмечается, может стать единой точкой входа как для внешних заказчиков, так и для внутренних нужд компании. В октябре 2022 года «Ростелеком» объявил, что Axenix (ранее Accenture) будет разрабатывать на «Платформе управления данными» все свои IT-продукты для бизнеса. Кроме того, данное решение использует оператор Tele2.

Источник изображения: «Ростелеком»

Нужно отметить, что все компоненты «Платформы управления данными» внесены в Единый реестр российских программ для ЭВМ и БД. Использование данного решения позволяет реализовать стратегию импортозамещения. Платформа представляет собой ключевой элемент корпоративной архитектуры, необходимой для построения классического хранилища корпоративных данных, подготовки отчётности, создания масштабных озёр данных и пр.

«МегаФон» объявил о завершении сделки по покупке российского производителя ПО oneFactor, который занимается разработкой аналитических платформ на базе ИИ-технологий. oneFactor («Единый фактор») создаёт аналитические ИИ-сервисы для банковской сферы, страховых компаний, электронной коммерции, ретейла и туризма. Компания, в частности, запустила в коммерческую эксплуатацию платформу машинного обучения для оптимизации ключевых бизнес-процессов на основе обработки больших массивов данных. Её первыми пользователями стали «МегаФон», Skyeng и «Авито».

Кроме того, в ассортимент oneFactor входят сервисы для оценки рисков, лидогенерация для развития коммерции и бизнеса предприятий, геоаналитика в области туризма и городской среды, а также другие решения с использованием больших данных. Отмечается, что в настоящее время рынок продуктов и сервисов на основе big data растёт приблизительно на 40 % в год.

Источник изображения: pixabay.com

По условиям сделки, «МегаФон» стал владельцем 100 % ООО «Единый фактор». После слияния oneFactor сохранит все текущие контракты и продолжит оказывать услуги внешним партнёрам. «oneFactor — наш давний партнёр в области big data, появление компании в периметре "МегаФона" позволит нам повысить эффективность этого бизнес-направления и предлагать рынку самые современные инструменты для развития бизнеса и отдельных территорий», — отмечает оператор.