МТС поможет московским застройщиком с мониторингом шума и пыли

МТС представила комплексное решение для контроля в реальном времени уровня шума и пыли на стройплощадках Москвы в рамках решения МТС Экология. Решение должно помочь застройщикам выполнять их обязательства по контролю автоматизированными датчиками уровня шума и концентрации пыли, а также по передаче этих данных в городские информационные системы.

Решение МТС включает программно-аппаратный комплекс: датчики уровня шума и концентрации пыли, которые устанавливают по периметру стройплощадки и в контрольных точках. Данные в режиме реального времени поступают в личный кабинет пользователя и ГИС в соответствии с регуляторными требованиями. 

В облачной платформе МТС заказчик может отслеживать текущие показатели запыленности и шума, историю измерений, формировать аналитические отчеты. Система автоматически оповещает сотрудников, если показатели приближаются к предельно допустимым значениям или их превышают.

У МТС уже сформировалась линейка цифровых сервисов для строительной области, которая включает видеонаблюдение, контроль доступа, мониторинг техники, связь и облачные платформы, новинка может быть интегрирована с ними. У застройщиков, за счет этого, есть возможность выстроить единый цифровой контур управления площадкой с одним технологическим партнёром. Решение может быть адаптировано под площадки любого размера – от точечной застройки до крупных девелоперских проектов.

«Мы создавали этот продукт в диалоге с участниками строительного рынка и хорошо понимаем их задачи. Застройщику важно, чтобы решение быстро разворачивалось, работало надежно и не создавало дополнительной операционной нагрузки. Наш сервис именно такой: датчики устанавливаются без прокладки проводных коммуникаций, данные передаются автоматически, отчётность формируется в личном кабинете. Это позволяет строительным командам сосредоточиться на основной работе, а не на администрировании экологического мониторинга», - комментирует руководитель центра МТС Экология Олеся Суханос.

-- 

T2 внедрил геораспределенную отказоустойчивую систему мониторинга на базе российского решения Пульт

Оператор T2 в сотрудничестве с ИТ-компанией «Инфосистемы Джет» спроектировал и внедрил систему Пульт на базе российского продукта компании «Лаборатории Числитель». 

Новая система обеспечивает непрерывный контроль распределенной инфраструктуры T2 и призвана обеспечивать ее устойчивую работу даже при выходе из строя отдельных ЦОД. Решение уже отслеживает и прогнозирует состояние более 30 тысяч объектов по всей стране. Как утверждает оператор, скорость реагирования на инциденты выросла в 2.7 раза. Архитектура способна выдержать трехкратный рост количества данных, обеспечивает долгосрочное хранение - до семи лет, а также анализ больших данных.

Прибегать к таким решениям операторов заставляет рост объемов обработки данных и повышение требований к надежности услуг. Любые сбои в инфраструктуре как правило, становятся заметны миллионам абонентам, нанося ущерб репутации и выручке компании. В T2 искали решение, которое обеспечило бы полную наблюдаемость инфраструктуры, высокую производительность и устойчивость к внешним воздействиям. И такое решение на российском рынке нашлось. 

Разработка построена на базе российской разработки «Пульт», в основе решения – ядро Zabbix. Геораспределенная архитектура охватывает три ЦОДа и 12 площадок. Решение отличается повышенной производительностью – система обрабатывает до 15 млн метрик. Сбор данных идет через прокси-серверы, а гибридность хранения обеспечивают PostgresSQL и ClickHouse. 

Комбинирование технологий обеспечивает высокую скорость обработки данных и простую масштабируемость.

Павел Ковальский, директор по стратегическому развитию сети Т2:

«Новая система демонстрирует стабильную работоспособность без деградации, готова к дальнейшему масштабированию и поддерживает рост нагрузки без необходимости архитектурных изменений. Модернизация и внедрение катастрофоустойчивого мониторинга позволили не только повысить скорость реакции на инциденты, но и перейти к проактивному управлению инфраструктурой. Сегодня мы уверены в устойчивости системы даже в самых сложных сценариях».

Алексей Акопян, руководитель направления мониторинга «Инфосистемы Джет»:

«Перед нами стояла задача федерального масштаба – создать распределенную архитектуру, которая сохраняет работоспособность даже при серьезных отказах. Мы спроектировали систему, сочетающую отказоустойчивость, масштабируемость и соответствие требованиям импортозамещения, с запасом на дальнейший рост. Она работает на основной и резервной площадках – и при отказе узлов или целого дата-центра сервисы продолжают работу автоматически».

Дмитрий Унтила, СРО «Графини» и «Пульта»:

«Одним из ключевых преимуществ системы «Пульт» перед Zabbix являются наши доработки, которые позволяют ей стабильно и надежно работать при высоких нагрузках в enterprise-инфраструктуре и хранить большие объемы данных. В результате нам удалось в три раза увеличить мощности по сбору данных мониторинга и оптимизировать их хранение в 10 раз».

|| 

IT: MTC Web Services запустила продукт для управления программными активами и лицензиями MWS Softora

Использование продукта позволяет компаниям экономить на ПО и ИТ-поддержке за счет автоматизации процессов. 

MWS Softora – это единая система для работы ПО на протяжении полного цикла от планирования и закупки до контроля использования и списания. Сервис объединяет данные из разных источников: организационно структурных систем, учета и доставки, сервис-десков, ERP и серверов лицензирования и в результате формирует единый реестр с полной картиной использования ПО внутри компании. 

Для пользователей предусмотрена витрина приложений, где сотрудники могут самостоятельно устанавливать программы без участия ИТ-отдела. Как подсчитали в MWS, это сокращает время установки ПО на рабочее место до 76%, одновременно снижая количество заявок на согласование до 70%. Применение решения для управления нематериальными активами позволяет достичь точности данных до 95%.

Использование MWS Softora должно помочь контролировать лицензии, распределять нагрузку в ИТ-команде, исключать использование нелегального ПО, перерасходовать бюджет и т.п.

В каталоге системы более 10 тысяч наименований, решение учитывает не только лицензированные продукты, но и программное обеспечение с открытым кодом, санкционные приложения, а также предлагает безопасные аналоги. Для интеграции предусмотрены гибкие драйверы, которые позволяют подключать как решения ведущих вендоров, так и open-source системы или разработки компаний. 

«Мы стремимся предлагать бизнесу простые и понятные решения, которые помогают экономить ресурсы и работать эффективнее. Благодаря использованию MWS Softora компании получают достоверные данные о своем парке программ и могут эффективно управлять подключенным ПО, отслеживать актуальность лицензий и при необходимости подбирать аналоги для решения задач бизнеса», – прокомментировал генеральный директор МТС Web Services Павел Воронин. 

MWS Softora выпускается в базовом или в расширенном пакете. 

- - 

МТС вошла Топ-5 рейтинга крупнейших IT компаний России по версии TAdviser

Аналитики TAdviser ежегодно оценивают выручку и численность сотрудников компаний, работающих на российском IT-рынке в рамках рейтинга "TAdviser100: Крупнейшие ИТ-компании России". По итогам 2023 года МТС оказалась на 4-м месте в рейтинге (поднявшись с 6-го по итогам 2022 года). 

Выручка экосистемы в 2023 году составила 606 млрд рублей, увеличившись на 13,5% год к году. Количество ИТ-специалистов в МТС в прошлом году выросло на 15% и превысило 8 тыс. человек.

Наиболее заметное влияние на результаты компании в рейтинге оказало развитие собственной технологической платформы The Platform, которая декомпозируется на десятки платформ для решения конкретных задач: работа с данными, безопасность и так далее. Благодаря переходу на The Platform срок вывода продуктов на рынок сократился на 40%, - утверждает МТС. Время от появления задачи в бэклоге до реализации уменьшилось в четыре раза, во столько же повысилась надежность Mission Critical систем. В основе единой платформы технологии Open Source, доработанные МТС или созданные с нуля. 

«Собственная разработка всегда была нашим приоритетом. Все ключевые технологии, которые обеспечивают конкурентные преимущества МТС, разработаны внутри компании. Мы намерены и дальше развивать технологическую независимость, создавая новые продукты и совершенствуя уже существующие. Лидерство в рейтингах для нас - дополнительный драйвер, благодарим TAdviser за высокую оценку нашей работы», — прокомментировал первый вице-президент по технологиям МТС Павел Воронин. 

Одним из значимых событий по части импортозамещения стал переход на собственную антифрод- систему Fraud Detection Platform. Решение полностью замещает иностранное ПО и более чем на 30% быстрее и точнее анализирует поведение пользователей и выявляет аномалии. 

Топ-10 крупнейших ИТ-компаний по версии TAdviser:

-- 
 

В облако beeline cloud интегрировали решения для планирования и анализа данных компании Оптимакрос

Облачный сервис beeline cloud пополнили решения для корпоративного планирования, мониторинга и анализа данных компании Оптимакрос. Это результат интеграции облачного сервиса и платформы Optimacros. 

Клиенты сервиса beeline cloud, используя Оптимакрос, получают доступ к продуктам для принятия обоснованных решений. 

Какие преимущества интеграции отмечают компании?

• Клиенты смогут выбрать облачную или on-premise версию платформы Optimacros. При необходимости возможен плавный переход с одной на другую. 
• Использование облачной платформы обеспечивает возможность масштабирования под потребности бизнеса, отсутствие простоев. 
• Простоту использования. 

«Мы рады нашему продуктивному сотрудничеству с «Оптимакрос». Интеграция передовых инструментов анализа и планирования с нашими облачными сервисами предоставит клиентам еще больше возможностей для эффективного управления данными и комплексного развития бизнеса», – прокомментировал коммерческий директор beeline cloud Сергей Кондратьев. 

-- 

Встречи: МТС проведет открытую конференцию МТС Платформа 2024 - компания расскажет о новых цифровых решениях

15 мая в Москве, в МТС Live Холл компания презентует новые цифровые решения и сервисы экосистемы. Первая часть конференции посвящена тому, как технологии и сервисы помогают клиентам в повседневной жизни, что получают клиенты за счет партнерств МТС, как продукты МТС помогают в защите от мошенников и нежелательного контента. Разумеется, не обойдется и без темы ИИ. Во второй части встречи внимание будет уделено индустрии развлечений с использованием цифровых решений МТС, будет затронута тема инструментов для создания оригинальных релизов и монетизации пользовательского контента. 

Заявленные спикеры:

«Цифровая экосистема МТС масштабируется и совершенствуется, меняя мир вокруг. То, что казалось нереалистичным еще вчера, сегодня стало частью повседневной жизни — границы между физическим и цифровыми мирами стираются, а опыт сервисного обслуживания в онлайн становится всё более актуальным. Мы активно инвестируем в инфраструктуру: строим базовые станции и развиваем облачные решения. В основе наших продуктов лежат самые современные технологии - языковые модели и генеративный AI МТС, видеоаналитика и Big data. Обо всем этом мы расскажем, а главное - покажем на конференции «МТС Платформа 2024», - прокомментировал президент МТС Вячеслав Николаев.   

Заявленный формат конференции - мультимедийное шоу. Для регистрации нужно заполнить форму на сайте мероприятия - https://platforma.mts.ru (обещается и прямая трансляция, но по моему опыту прошлого года интереснее смотреть из зала).  

МТС проинвестирует до $5 млн в стартапы, разрабатывающие продукты на технологии блокчейн

МТС запускает "блокчейн-акселератор". Компания приглашает к участию стартапы, разрабатывающие цифровые продукты на основе технологии блокчейн. Выпускники акселерационной программы получат возможность привлечь инвестиции от венчурного фонда МТС.

Заявки собирает Центр инноваций и инвестиций MTS StartUp Hub, в состав которого входит венчурный фонд. Прием заявок - до 10 июня, регистрация  - на офсайте программы.  

Кто может участвовать?

Стартапы с разработками по следующим направлениям:

Физические устройства доступа к распределенным реестрам:

• Криптокарты
• Системы идентификации на блокчейне
• Криптобанкоматы и точки доступа к реестрам

Fin-Tech сервисы

• Платежные решения для осуществления транзакций (С2С/В2С/В2В) c цифровыми активами;
• Краудфандинг- и краудинвестинг-платформы на базе Blockchain;
• КПлатформа для благотворительных фондов на блокчейне.

Сервисы для регистрации и передачи прав собственности

• Распределенные реестры для регистрации прав собственности и проведения процедур патентования;
• NFT;
• Цифровой паспорт на любой физический актив.

Кибербезопасность данных и инфраструктуры

• Решения в области безопасного обмена персональными данными на базе блокчейна;
• Протоколы для обмена информацией между сетями и ее верификации;
• Решения по обеспечению безопасного цифрового периметра.

Другие решения

• Продукты на базе Blockchain с высоким инвестиционным потенциалом.

Среди критериев отбора - MVP в наличии, а также подтвержденный рынок для развития продукта. 

В акселерационной программе, которая продлится в течение 2 месяцев, примут участие такие эксперты, как Владимир Стасевич (Атомайз, Евгений Архипов (экс-блокчейн Ак Барс Банк) и другие. 

Программа акселератора включает практические мастер-классы и воркшопы, индивидуальную работу с трекерами и бизнес-заказчиками из МТС по доработке продукта и бизнес-стратегии. Участники смогут подключиться к инфраструктуре ЦФА ХАБ (блокчейн-латформа, разработанная в ООО Блокчейн хаб, дочерней компании ПАО МТС) для тестирования бизнес-моделей. Кроме того, стартапы получат доступ к 80-млн аудитории МТС для проведения пилотных запусков продуктов в контуре экосистемы. 

1 сентября участники представят питчи своих проектов в рамках демо-дня, на который кроме топ-менеджмента МТС будут приглашены представители внешних венчурных фондов, частные инвесторы и лидеры блокчейн-отрасли. 

«Последние несколько лет мы наблюдаем активное развитие решений на базе технологий распределенного реестра. Развитие технологии блокчейн и ее применение также приветствуется со стороны регулятора, который активно формирует нормативную базу для применения подобных решений в бизнесе и жизни. В МТС мы уже несколько лет развиваем собственную экспертизу на рынке Blockchain на базе инфраструктуры и лицензии ЦФА Хаб (платформа, разработанная дочкой МТС — ООО «Блокчейн хаб»). Мы приглашем к сотрудничеству технологические проекты на базе Web3 и готовы предоставить им экспертизу, доступ к технологиям и экосистеме МТС, а также инвестиции для развития новых прорывных продуктов!», — говорит директор департамента стратегического развития и инвестиций МТС Дмитрий Курин.  

МТС отмониторит качество работы сетевой инфраструктуры

МТС внедрила в масштабах всей страны автоматизированную систему мониторинга качества работы транспортной, коммутационной и облачной сетей. Платформа на основе ИИ собирает информацию о состоянии оборудования, сигнализирует о проблемах, включая прогнозы о возможных проблемах. Это упрощает обслуживание сети, сокращает число аварий и время простоя, повышает стабильность работы сети и качество услуг оператора. Новая система отличается от прежней более высоким уровнем автоматизации, большей производительностью и масштабом. 

Систему  NPM (Network Performance Monitoring) разработали в МТС. Она позволяет за время от секунд до 5 минут оценивать работоспособность различных компонентов инфраструктуры: транспортной, региональной, магистральной сетей, коммутаторов, ЦОДов, сервиса контроля качества IP-ТВ, систем электропитания оборудования, датчиков температуры. 

«Одним из ключевых преимуществ нашей разработки является гибкость, масштабируемость и высокая производительность. Система построена на отказоустойчивых компонентах и микросервисах, поддерживает различные протоколы мониторинга и инвентарные базы, что позволяет ей интегрироваться с практически любым типом оборудования от различных вендоров», – отметил вице-президент по технике МТС Виктор Белов. 

«Видя в моменте единую картину работы всех компонентов сети, система мониторинга позволяет нашим специалистам не только оперативно реагировать на инциденты, но и эффективно предупреждать их. Первые результаты работы системы доказали ее эффективность, а масштабируемость позволит подключать к NPM уже в следующем году другие критически важные элементы сетевой инфраструктуры», – подчеркнул Белов.

 -- 

Еще один пример того, как полезно для современного оператора собственное мощное IT-подразделение, способное вести разработки такого уровня. В МТС оно есть и плоды его работы нетрудно заметить - чего стоит только новый биллинг. In-house решения - это контроль, снижение зависимости от зарубежных поставщиков ПО, возможность оперативной модификации программного обеспечения по мере необходимости. МТС, похоже, последовательно проводит политику перехода на собственные программные решения, что в условиях санкций особенно актуально. 

ИТ-подразделение ВымпелКом beeline cloud и Лаборатория Касперского подготовили решение Cloud SD-WAN

На рынке ИТ и телекома растет интерес к решениям Cloud SD-WAN - решениям для управления сетевой инфраструктурой предприятий. Совместный продукт основан на платформе Kaspersky SD-WAN. 

Cloud SD-WAN - это технология, которая использует облачную оркестрацию и управление для подключения географически разнесенных локаций через различные интернет-соединения для создания безопасной и надежной сети WAN. Если говорить проще, то вместо закупок громоздкого и дорогого оборудования, можно опираться на виртуальные сетевые функции (VNF), запущенные в облаке, для управления и оптимизации сетевым трафиком. Особенно востребованы такие решения в крупных компаниях с региональными филиалами. 

Какие особенности SD-WAN работают на популярность этого решения?

• Прежде всего, этот подход позволяет масштабировать сетевую инфраструктуру быстро и сравнительно легко. Можно оперативно добавлять и удалять локации. То есть у решения высокая гибкость. 
• Можно ожидать повышения отказоустойчивость сети, автоматически динамически переключая трафик на каналы с лучшими показателями в текущих условиях, обеспечивать резервирование с помощью встроенных LTE-модемов. 
• SD-WAN обеспечивает высокую производительность - за счет оптимизации сети.
• Есть потенциал снижения затрат за счет отказа от покупки железа, упрощения управлением, оптимизированное использование пропускной способности. 

Особенность решения Cloud SD-WAN - встроенные механизмы безопасности от Лаборатории Касперского, что обещает рост уровня защищенности корпоративных данных. Да и в целом Cloud SD-WAN обеспечивает возможность централизованного управления безопасностью и защитой от угроз. 

Олег Мотовилов, генеральный директор beeline cloud:

«Cloud SD-WAN привнесет значительные изменения в область сетевых технологий отечественных компаний. Наше совместное усилие направлено на предоставление клиентам инновационных решений, которые сочетают в себе передовые технологии и безопасность данных».

-- 

МТС представила конструктор Front Platform для быстрого запуска сервисов на витринах экосистемы

Front Platform - часть The Platform, объединяющей все сквозные решения ИТ-экосистемы МТС. Основная задача платформы - предоставить инструменты low code для быстрой реализации пользовательских сценариев и запуска новых продуктов в необычных форматах. Front Platform позволяет быстро выводить новые функциональности на витрины компании. 

Сервис позволяет стандартизовать подходы, что повышает возможности переиспользования решений в разных проектах. Как ожидается, это снизит нагрузку на ИТ-команды на 30%. 

Конструктор основан на подходах Server-Driven UI (SDUI) и позволяет динамически управлять пользовательским интерфейсом. Эта технология позволяет серверу отправлять инструкции и данные для формирования интерфейса, обновляется он без необходимости загрузки на устройство пользователя новой версии приложения. Элементы пользовательского интерфейса в каталоге МТС Front Platform стандартизованы, что обеспечивает дизайн-система MTS Granat. 

Интеграция сервис-провайдеров происходит через унифицированный API. Управление продуктами, созданными на платформе осуществляется через админ-панель. Упрощенный интерфейс позволяет создавать сайты и приложения без специальных технических знаний.

На Front Platform перейдут, прежде всего, Мой МТС и MTC Live. Для внешнего рынка платформу откроют с конца 2025 года. В режиме совместного редактирования могут работать одновременно несколько продуктовых команд. Прорабатывается пользовательская ролевая модель работы в системе, в этом случае, в зависимости от ролей, будет предоставляться различный функционал и доступ к сервисам Front Platform.

Единый интерфейс позволяет использовать в том числе разработки других команд. 

Общая идея конструктора - сократить время подготовки и вывода проектов на витрины экосистемы, что обещает экономию затрат на разработку frontend приложений. 

МТС поможет клиентам перейти с Microsoft Exchange на отечественные сервисы

Провайдер CloudMTS поможет клиентам бесплатно перенести данные с корпоративной почты Microsoft Exchange в отечественные сервисы для совместной работы, расположенные в облаке.

Речь идет о так называемом едином корпоративном пространстве для хранения и обмена файлами - Диск CloudMTS, где развернуты облачные услуги для совместной работы сотрудников на базе ПО Офис CloudMTS, решение для офисной работы через единый веб-интерфейс Офис Лайт CloudMTS, а также сервис корпоративной почты. 

Перенос сохранит все данные из почты и хранилища файлов. Мигрировать можно как с Microsoft Exchange, развернутого в облаке в России, так и с почтовых сервисов, расположенных на серверах за рубежом. Специалисты CloudMTS обещают содействие миграции, а также обеспечат интеграцию решений  ресурсами заказчика, обслужат и поддержат продукт. 

Можно выбрать либо публичную инсталляцию в облаке, либо частную инсталляцию, когда под каждого клиента разворачивается отдельный экземпляр сервиса.

«Мы видим растущий интерес к российскому программному обеспечению для офисной работы. И инструменты для совместной работы пользователей  являются одними из важнейших подобных сервисов. Все больше наших клиентов обращаются к нам с просьбой перевести их данные в наши решения для совместной офисной работы. Инициатива с бесплатным переносом облегчает для компаний этот путь...», - отметила директор по развитию продуктов CloudMTS Вера Баева. 

МТС научит магистрантов ИТМО разрабатывать рекомендательные системы

ИИ во всех сферах - это наше самое ближайшее будущее. Но для того, чтобы оно наступило, нужны специалисты в области машинного обучения, Big Data и ИИ. Подготовке таких специалистов поможет МТС. 

Компания запустила курс по разработке рекомендательных систем на языке Python в рамках онлайн-магистратуры по машинному обучению AI Talant Hub, созданной университетом ИТМО и компанией Napoleon IT. 

Три недели менторы команды Big Data МТС будут читать студентам лекции, проводить семинары, Q&A сессии и давать домашние задания на примере реальных проектов компании с использованием данных и фреймворков, выложенных в Open Source. 

Курс входит в список обязательных дисциплин для магистрантов. За время обучения им предстоит освоить работу c Big Data, популярными фреймворками для построения рекомендательных систем. Их обучат использовать двухуровневые и нейросетевые модели. 

По итогам курса, выпускники будут готовить проект, который смогут включит в портфолио - на основе заданного шаблона создадут рекомендательный сервис. 

«Рекомендательные системы – одно из самых успешных направлений в машинном обучении, это важнейший инструмент продаж и повышения лояльности клиентов во всех сферах бизнеса, начиная с ритейла и заканчивая цифровыми сервисами. Данных с каждым днем становится все больше - рынку нужны специалисты, готовые решать нетривиальные задачи, связанные с их обработкой и использованием. И мы рады поучаствовать в подготовке квалифицированных кадров, делясь внушительным практическим опытом нашей команды. ИТМО славится современным подходом к обучению, и мы благодарны за возможность передавать знания с их помощью. Занятия будут проходить в онлайн-формате, а это значит, что наши лекции и семинары смогут проходить ребята из любой точки России. Лучших студентов мы готовы пригласить на стажировку, не дожидаясь окончания курса, а самые перспективные даже могут получить от нас оффер», - прокомментировал руководитель направления анализа данных Big Data МТС Даниил Потапов.

пресс-релиз МТС

-- 

IT: Как телеком-оператору эффективно управлять потоками данных в реальном времени?

Вновь гостевая колонка для вас: Джефф Поллок, вице-президент по развитию продуктов интеграции и потоковой аналитики из штаб квартиры Oracle подготовил рекомендации, адресованные телеком-операторам. В период кризиса, когда меняются паттерны поведения пользователей, эти рекомендации стали особенно актуальными.

----

На рынке сбора и обработки данных несколько десятилетий подряд доминировал дискретный подход к обработке данных. Около 10 лет тому назад началась трансформация, которая привела к появлению подхода, известного, как data lake или «озеро данных». Но по мере формирования контуров облачной архитектуры стало ясно, что по-сути, вновь копируется централизованная архитектура девяностых годов. Цифровая трансформация требовала совсем иного подхода. В качестве ответа на этот запрос на рынке появилась архитектура data mash, подразумевающая, что данные хранятся не только в озере данных, но и непосредственно на устройствах.

Джефф Поллок, Oracle 

«В сетях 5G, например, значительная часть обработки данных будет проводиться на периферии сети, причем не только в периферийных ЦОД, но также и непосредственно на сетевых и терминальных устройствах, - отметил Джефф Поллок, вице-президент по развитию продуктов интеграции и потоковой аналитики из штаб-квартиры Oracle. - Например, по мере роста вычислительных мощностей, это могут быть те же автономные автомобили, вычислители их автопилотов». Один из руководителей разработки Oracle рассказал российским заказчикам, как эволюционирует архитектура работы с данными и как аналитические продукты Oracle помогают в цифровой трансформации современных предприятий.

В Oracle считают перспективным направлением создание полносвязной сети обработки данных, в которой обработка данных может происходить практически в любой точке системы, на периферийных узлах, в беспилотном автомобиле, в базе данных, в облаке, в озере данных, в телефоне.

Как собирать данные?

Oracle предлагает для этого эффективный и проверенный на практике инструмент - GoldenGate.

Первоначально этот продукт класса CDC (Change Data Capture) был «мостом», который позволял брать транзакции из высоко нагруженных систем и мгновенно передавать их аналитической базе данных. И если на первых порах данные передавались между реляционными базами данных, теперь это кейсы передачи данных из реляционных в нереляционные базы данных. Сферой применения GoldenGate зачастую становится работа с нереляционными базами данных kafka и озерами данных.

Озера данных первоначально реализовывались на технологии Hadoop. Позднее были созданы движки NoSQL, такие, как MangoDB, Apache Cassandra, хранилища ключей in-memory.  GoldenGate работает со всеми этими технологиями, передавая данные о транзакциях в реальном времени.

В последние годы пользовательский сценарий для GoldenGate смещается в область потоковой аналитики, то есть способности обработки данных в реальном времени. Приходится обогащать информацию о транзакциях данными из Big Data, и иных систем, причем не только Oracle, но и других поставщиков.

Если заглянуть в базу данных, в ней есть такая вещь, как журнал изменений. Каждый раз, когда делается запрос, вставляется какое-то значение, удаляется какое-то значение, это меняет содержимое не только базы данных, – событие также отражается в журнале изменений. Ведется непрерывная регистрация всех событий, которые происходят в базе данных. Анализ журнала событий позволяет понять суть происходящих событий, тогда как текущие данные в базе данных, это лишь отражение какого-то мгновенного ее состояния.

Можно провести аналогию с шахматной партией. Чтобы разобраться в завершенной партии, нужно проанализировать не только текущую расстановку фигур, но все ходы, которые делали игроки. База данных – это не более, чем доска, отражающая расстановку фигур, тогда как журнал изменений содержит данные «о ходе партии», о том, что и когда происходило с содержимым базы данных.

Заказчики Oracle сегодня используют GoldenGate в качестве основы не только для создания систем высокой доступности, но и для обработки потоковой информации. Впрочем, актуальной остается и задача обеспечения миграции данных, заполнения данными хранилищ –
традиционные задачи GoldenGate.

Большинство заказчиков Oracle используют GoldenGate не только для работы с системами Oracle, но и для работы с другими (.xls) системами. Реляционные базы данных - это основа, но при этом продукт работает и другими, самыми разными данными – NoSQL, потоковыми и так далее. Репликация транзакции осуществляется в пределах миллисекунд. Есть примеры использования GoldenGate в облаке, в том числе, в облаке у потребителя (Cloud at Customer Premises). Это очень гибкое решение, позволяющее реплицировать информацию не только внутри компании, но и между компаниями.

Oracle постоянно наращивает инвестиции в развитие GoldenGate практически с момента интеграции в портфолио корпорации 11 лет назад.

Инвестиции в разработку GoldenGate

Сейчас в разработке продукта задействовано порядка 300 инженеров, работающих в различных странах мира. Ежегодно выходит очередной релиз Oracle предоставляет GoldenGate в облаке и работает над тем, чтобы создать сервис Cloud Native GoldenGate. В версии 12.3 появилась поддержка микросервисной архитектуры, причем нативная.

Это означает, что можно работать практически с любой архитектурой, в частности, в случае 5G можно обеспечить сбор данных и результаты их обработки непосредственно с периферии сети.

Как анализировать данные?

Данные собраны, точнее, организован непрерывный процесс их сбора. Теперь нужно извлечь из них полезную информацию, причем делать это необходимо практически в режиме реального времени, работая непосредственно с потоком данных. Для этого предназначен такой мощный инструмент, как Oracle Stream Analytics (OSA).

Этот продукт может обеспечивать решение задач анализа транзакций. Технология знает о каждом действии, каждом событии, каждой транзакции. И не только в Oracle, а в любой подключенной к нему СУБД любого известного вендора, записанной в Kafka посредством GoldenGate. Благодаря этому можно вести анализ всех транзакций. Это может быть анализ по временным рядам, геопространственный анализ, можно выявить типичные транзакции, проанализировать события, зафиксированные подключенными устройствами. Все, что публикуется через сервис обмена сообщениями, OSA способен мгновенно сопоставить с транзакциями в базе данных, выполнив необходимый анализ за считанные миллисекунды.

(посмотреть, как выглядит работа с единым монитором можно здесь)

Заказчики компании по всему миру переходят на архитектуру data mash, полносвязную сеть данных. Эволюционно они уходят от монолитных систем, ориентированных на системы хранения данных. Наметился тренд на построение систем, основанных на работе с транзакциями.
Технологии GoldenGate и Oracle Stream Analytics критически важны для инфраструктур, где требуется обрабатывать данные непосредственно в потоке.

(посмотреть, как выглядит работа в реальном времени 

с картами в Oracle Stream Analytics можно здесь)

Наглядный интерфейс OSA позволяет бизнес заказчикам самостоятельно, в несколько кликов мышки собирать те или иные логические обработчики анализируемой информации, проводить вычисления на основе данных, отображать результаты обработки и вычислений. С такими «настройками» способен справиться практически любой бизнес-пользователь, без необходимости привлечения IT-персонала.

Основным преимуществом Oracle Stream Analytics является то, что продукт включает обширный набор преднастроенных функций для обработки потоковых данных, а также красивые шаблоны визуализации, в том числе, для использования на географических картах.

Основное достоинство платформы Oracle Stream Analytics в том, что она позволяет бизнесу быстро извлечь value из данных.

Вместе – сильнее

Важно понимать, что хотя и Golden Gate, и Oracle Stream Analytics являются самостоятельными, комплексными и многофункциональными продуктами, наибольшую эффективность при работе телеком-оператора с данными в реальном времени обеспечит их тандем. По отношению к работе с потоками данных эти продукты комплиментарны и обеспечивают мощный синергетический эффект.

Работа с потоками данных позволяет эффективно контролировать изменения паттернов потребления данных абонентами, изменения в распределении пользователей «по географии». А в чрезвычайной ситуации важность знаний, что происходит на сети оператора в любой момент времени, возрастает. Это создает надежную основу для оперативного принятия мер, призванных поддержать стабильную работу сети и надлежащее качество оказания услуг, и позволяет не утратить понимание ситуации, что может возникнуть, если у оператора нет возможности для оперативного и наглядного контроля за данными.

----