Перспективы применения технологий открытого кода (Open Source) для системы формирования информационных ресурсов и аналитической подде

Содержание презентации
Об ООО «Газпром ВНИИГАЗ»
Причины применения открытого ПО
Недостатки открытого ПО. Риски внедрения
Опыт применения
Заключение

Об «Газпром ВНИИГАЗ»
ООО «Газпром ВНИИГАЗ» - головное научно-производственное подразделение ОАО «Газпром»
обеспечивает координацию научных исследований в рамках крупных целевых и инжиниринговых проектов и программ;
проводит научно-исследовательские, экспериментальные и опытно-конструкторские работы в Западной и Восточной Сибири, зоне Арктического шельфа, других регионах;
принимает участие в разработке важнейших задач и планов ОАО «Газпром» по обеспечению эффективной деятельности компании.

Причины применения открытого ПО. Ситуация на рынке
Какое ПО:
Управление СУБД
Управление информационными ресурсами
Поддержка принятия решений, средства аналитической обработки
Картография, визуализация данных
Специализированное ПО моделирования сред, проектирования и т.д.
Что имеется:
Нишевой рынок. Ограниченное количество компаний-производителей ПО для нефтегазового сектора
Необходимость существенной переделки ПО производителей из других секторов
Закрытость ПО для изменений и расширений
Существенный разрыв между объемами предложений зарубежных и российских компаний

Причины применения открытого ПО. Преимущества
Информационная безопасность
Независимость от крупных поставщиков
Привлечение и внедрение собственных алгоритмов, методик и разработок с целью создания отраслевых решений
Открытость стандартов обмена данными
Снижение совокупной стоимости владения программными комплексами

Недостатки открытого ПО. Риски внедрения
Постоянное изменение программного кода (программных решений)
Неустойчивость проектов в условиях непостоянного финансирования
Малый объем документации
Малое количество обучающих центров

Недостатки открытого ПО. Снижение рисков
Постепенная замена коммерческого ПО, «выкусывание» из производственного цикла
Создание технологических платформ (отраслевых, региональных, федеральных) для обмена опытом и разработками
Создание центров обучения
Формирование базы знаний по использованию открытого ПО
Маркетинговые исследования (широта распространения)
Изучение «успешных историй»

Подход в реализации. Цикл замены коммерческого ПО
Изучение опыта и готовых решений
Применение готовых коммерческих решений
Комплексирование с собственными разработками
Разработка собственных
решений
Замена
коммерческих
решений
Каждый следующий цикл обеспечивает снижение доли коммерческих решений и формирование окончательного решения
Каждый следующий виток (применение в других проектах) обеспечивает расширение функциональности
Коммерциализация собственных решений

Опыт применения открытого ПО. СИС-ЯМАЛ
Области применения:
Проектирование, строительство и обустройство
Природопользование, экологический и геотехнологический мониторинг
Средства:
сбора и хранения фактографических, цифровых и пространственных данных
визуализации данных
анализа, включая пространственный
Примененное открытое ПО
портальная web-технология (MojoPortal)
СУБД PostGreSQL с расширением для хранения пространственных данных PostGIS,
система пространственной визуализации GeoServer,
библиотеки классов Qt для реализации Desktop приложений,
Примененное открытого ПО (с доступным кодом)
Система управления и визуализации табличных данных DevExpress
централизованная система управления версиями Subversion;
система коллективного общения и взаимодействия на базе ПО компании Atlassian Software Systems

Система формирования информационных ресурсов. ПК «САПФИР»
Название: ПК «САПФИР»
Цель: Эффективное управление информационными ресурсами и предоставление сервиса для их использования
Использование: для внутренних задач ООО «Газпром ВНИИГАЗ»
Модули:
Модуль формирования информационных ресурсов
Модуль информационного обслуживания и аналитической поддержки

ПК «САПФИР». Формирование информационных ресурсов
Система загрузки и регистрации
Подсистема регистрации данных через формы
Подсистема массовой регистрации данных
Подсистема первичного контроля качества (контроля целостности)
Система доступа к данным
Поисковая система
База метаданных и ведения нормативно-справочной информации (НСИ)
Подсистема формирования и управления динамическими иерархическими деревьями
Подсистема просмотра специализированных форматов
Система администрирования и разграничения прав доступа
Система формирования пакетов данных
Подсистема формирования пользовательских пакетов данных
Подсистема преобразования форматов

Поисковая система. Анализ рынка
Большие компании-производители ПО управления данными отрасли (Schlumberger, Halliburton):
высокая цена лицензий;
высокая степень ориентации на свои cобственные источники данных;
не владение технологией
Большие компании-производители ПО индексации корпоративных сред (Google Enterprise, FAST enterprise search, Autonomy)
высокая стоимость лицензий;
отсутствие отраслевого опыта;
только документы.

Поисковая система. Выбор движка
Наиболее существенные параметры:
поддержка индексирования и поиска информации, которая хранится в СУБД;
работа с разными языками и морфологический разбор (стремминг) – обеспечение работы с такими языками, как: русский, английский, испанский;
скорость поиска;
поддержка дополнительных типов полей в документах;
наличие встроенных механизмов ранжирования и сортировки.
Sphinx:
Распределенный поиск и кластеризация
Распараллеливание
Apache Lucene:
Наиболее удобный для встраивания

Система загрузки и регистрации. Формирование пакетов. Qt
Преимущества Qt:
Возможность непрямого доступа к БД через HTML обращение;
Возможность встраивания в локальный интерфейс функций Web-браузера с показом результата загрузки;
Широкие возможности обработки данных при обработке загружаемых данных;
Передача загружаемых файлов на сервер различными протоколами.

Arctic Web (www.arcticweb.com) - проект, спонсируемый шестью компаниями:
Statoil, ConocoPHilips, BG Group, EN, Lundin, Shell, создания единой технологической платформы
по Арктическому шельфу Норвегии для обмена информацией как между самими компаниями, так и сервисными и научными организациями, участвующими в изучении шельфа.
Институт морских исследований,
Норвежский институт природных ресурсов,
Геологическая служба Норвегии,
Рыболовецкий директорат,
Норвежский полярный институт,
Норвежский нефтяной директорат
Норвежский МПР и т.д.
Пример успешности применения открытого ПО. Arctic Web

Ближайшие перспективы внедрения открытого ПО
Задачи
Формирование информационных ресурсов (сбор, хранение, поиск, визуализация, формирование пакетов)
Аналитическая обработка и обслуживание (OLAP, отчетность, анализ, семантика и морфология)
Экспертное обслуживание (формирование спец.пакетов, подборка данных под задачи, экспертиза качества и т.д.)
Формирование информационных ресурсов
СУБД (PostgreSQL), СУБД для пространственных данных PostGIS
поисковые системы (Sphinx, Lucene)
Управление цифровыми данными – Qt, JQuery
Управление пространственными данными - GeoServer
Аналитическая обработка и обслуживание
OLAP, отчетность – Pentaho
системы управления документами – Alfresco
Экспертное обслуживание
Разработка собственных решений
Мониторинг рынка открытого ПО

Заключение
Чего достигли
Расширяется сфера использования открытого ПО от операционной системы (Linux) в начале пути, до реализации конкретных бизнес-задач
Увеличивается активность российских разработчиков и применение накопленного научного и технического опыта
Что желали бы:
Объединения российских разработчиков в области открытого ПО, создания технологических платформ (отраслевые, региональные, федеральные)
Проработки правовых вопросов использования и распространения ПО
Увеличения числа форумов и конференций по этой тематике