Внедрение систем хранения
данных для сейсморазведки
и промысловой геофизики
Всеволод Шабад, «СетьПроект»
2

Раньше я не умел плавать
3

Есть множество причин не учиться
Это не самое важное в жизни
Если будет действительно нужно — доплыву!
Чему там учиться?!
В 40 лет учиться плавать поздно!
Все тренеры одинаковы — они просто козлы!
…
4

Итоги 2013
Значимые результаты
•крепкое здоровье
Амбициозные цели
•Босфор в 2015 году
Осознание массы
тонких нюансов
•техника плавания
•тактика плавания
•снаряжение
•физиология
•…
5

Внедрение СХД для геологии и геофизики?
Зачем нужны такие СХД?
Чем такие СХД отличаются
от обычных?
Зачем нужно внедрение?
Как выбрать внедренца?
Какие еще есть нюансы?
6

Ключевые факторы успеха
Светлые головы
Умелые руки
Правильные инструменты:
•программные ресурсы
•аппаратные ресурсы
•серверные кластеры
•системы хранения данных
Немного удачи
7

Ключевые факторы успеха
Светлые головы
ограниченный ресурс!
Умелые руки
Правильные инструменты:
•программные ресурсы
•аппаратные ресурсы
•серверные кластеры
•системы хранения данных
Немного удачи
8

Ключевые факторы успеха
Светлые головы
ограниченный ресурс!
Умелые руки
Правильные инструменты:
•программные ресурсы
•аппаратные ресурсы
•серверные кластеры
•системы хранения данных
Немного удачи
9

Зачем нужны СХД?
Повышение эффективности работы геофизиков
Сокращение сроков выполнения проектов
Повышение качества выполнения проектов
Расширение портфеля проектов
10

Зачем нужны СХД?
Повышение эффективности работы геофизиков
Сокращение сроков выполнения проектов
Повышение качества выполнения проектов
Расширение портфеля проектов
11

Зачем нужны СХД?
Повышение эффективности работы геофизиков
Сокращение сроков выполнения проектов
Повышение качества выполнения проектов
Расширение портфеля проектов
12

Зачем нужны СХД?
Повышение эффективности работы геофизиков
Сокращение сроков выполнения проектов
Повышение качества выполнения проектов
Расширение портфеля проектов
13

Особенности СХД для G & G
Общие свойства:
•огромные объемы данных – сотни ТБ
•масштабируемость по ёмкости и скорости
Три класса систем хранения сейсмоданных:
•обработка
•интерпретация и моделирование
•архивирование
14

Кое-что о масштабируемости

NetApp
FAS
EMC
Isilon

250 000
NFS IOPS
дисков ТБ
288
48
672

500 000
NFS IOPS
дисков ТБ
576
96

172.3 1344

1 000 000
NFS IOPS
дисков ТБ
1152
192

344.5 3360

864

Из http://www.spec.org/sfs2008/results/sfs2008nfs.html
15

СХД для обработки сейсмоданных
Очень большие объемы данных
Множественный доступ к единой файловой
системе
Последовательный ввод-вывод большими
блоками
Пакетный режим работы
Операционные системы — только Linux
16

СХД для интерпретации сейсмоданных
Большие объемы данных
Множественный доступ к единой программной
среде — база данных и файлы
Индивидуальная работа с данными
Диалоговый режим работы
Произвольный ввод-вывод малыми блоками
Операционные системы — Linux, Windows
17

СХД для архивирования сейсмоданных
Огромные объемы данных
•сравнительно небольшая база данных
•сравнительно немного огромных файлов
Обеспечение гарантированной долгосрочной
целостности данных
Пакетный (иногда и диалоговый!) режим работы
Последовательный ввод-вывод большими
блоками
Операционные системы — Linux, Windows (?)
18

Как правильно выбрать решение?
19

Факторы выбора решения
С каким ПО будет работать?
Каковы пределы масштабирования?
Универсальная СХД или специализированная?
Минимизация капитальных или
эксплуатационных расходов?
Диск или лента?
Решение от единого вендора (IBM?) или
множества вендоров?
Корпоративные правила
…
20

Факторы сложности выбора
Информационная закрытость
•вендоры геофизического ПО
•вендоры инфраструктуры
Отсутствие специалистов с широким кругозором,
глубокими знаниями и практическим опытом
•у заказчика
•у вендоров геофизического ПО
•у вендоров инфраструктуры
•у интеграторов
Пристрастность продавцов
•продают продукт, а не решение задачи
Дороговизна и длительность стендовых испытаний
21

«СетьПроект» — правильный интегратор
Партнерство с ключевыми вендорами СХД
•NetApp, Panasas, IBM, EMC, Intel, Quantum, …
Партнерство с вендорами геофизического ПО:
•Paradigm, KADME
Специализация на нефтегазовой отрасли
•и опыт работы с другими отраслями
Продвинутые технологии управления проектами
Опыт разнообразных проектов
Квалифицированный персонал
22

Плывем вместе?

www.netproject.ru

Внедрение систем хранения данных для сейсморазведки и промысловой геофизики

  • 1.
    Внедрение систем хранения данныхдля сейсморазведки и промысловой геофизики Всеволод Шабад, «СетьПроект»
  • 2.
    2 Раньше я неумел плавать
  • 3.
    3 Есть множество причинне учиться Это не самое важное в жизни Если будет действительно нужно — доплыву! Чему там учиться?! В 40 лет учиться плавать поздно! Все тренеры одинаковы — они просто козлы! …
  • 4.
    4 Итоги 2013 Значимые результаты •крепкоездоровье Амбициозные цели •Босфор в 2015 году Осознание массы тонких нюансов •техника плавания •тактика плавания •снаряжение •физиология •…
  • 5.
    5 Внедрение СХД длягеологии и геофизики? Зачем нужны такие СХД? Чем такие СХД отличаются от обычных? Зачем нужно внедрение? Как выбрать внедренца? Какие еще есть нюансы?
  • 6.
    6 Ключевые факторы успеха Светлыеголовы Умелые руки Правильные инструменты: •программные ресурсы •аппаратные ресурсы •серверные кластеры •системы хранения данных Немного удачи
  • 7.
    7 Ключевые факторы успеха Светлыеголовы ограниченный ресурс! Умелые руки Правильные инструменты: •программные ресурсы •аппаратные ресурсы •серверные кластеры •системы хранения данных Немного удачи
  • 8.
    8 Ключевые факторы успеха Светлыеголовы ограниченный ресурс! Умелые руки Правильные инструменты: •программные ресурсы •аппаратные ресурсы •серверные кластеры •системы хранения данных Немного удачи
  • 9.
    9 Зачем нужны СХД? Повышениеэффективности работы геофизиков Сокращение сроков выполнения проектов Повышение качества выполнения проектов Расширение портфеля проектов
  • 10.
    10 Зачем нужны СХД? Повышениеэффективности работы геофизиков Сокращение сроков выполнения проектов Повышение качества выполнения проектов Расширение портфеля проектов
  • 11.
    11 Зачем нужны СХД? Повышениеэффективности работы геофизиков Сокращение сроков выполнения проектов Повышение качества выполнения проектов Расширение портфеля проектов
  • 12.
    12 Зачем нужны СХД? Повышениеэффективности работы геофизиков Сокращение сроков выполнения проектов Повышение качества выполнения проектов Расширение портфеля проектов
  • 13.
    13 Особенности СХД дляG & G Общие свойства: •огромные объемы данных – сотни ТБ •масштабируемость по ёмкости и скорости Три класса систем хранения сейсмоданных: •обработка •интерпретация и моделирование •архивирование
  • 14.
    14 Кое-что о масштабируемости NetApp FAS EMC Isilon 250000 NFS IOPS дисков ТБ 288 48 672 500 000 NFS IOPS дисков ТБ 576 96 172.3 1344 1 000 000 NFS IOPS дисков ТБ 1152 192 344.5 3360 864 Из http://www.spec.org/sfs2008/results/sfs2008nfs.html
  • 15.
    15 СХД для обработкисейсмоданных Очень большие объемы данных Множественный доступ к единой файловой системе Последовательный ввод-вывод большими блоками Пакетный режим работы Операционные системы — только Linux
  • 16.
    16 СХД для интерпретациисейсмоданных Большие объемы данных Множественный доступ к единой программной среде — база данных и файлы Индивидуальная работа с данными Диалоговый режим работы Произвольный ввод-вывод малыми блоками Операционные системы — Linux, Windows
  • 17.
    17 СХД для архивированиясейсмоданных Огромные объемы данных •сравнительно небольшая база данных •сравнительно немного огромных файлов Обеспечение гарантированной долгосрочной целостности данных Пакетный (иногда и диалоговый!) режим работы Последовательный ввод-вывод большими блоками Операционные системы — Linux, Windows (?)
  • 18.
  • 19.
    19 Факторы выбора решения Скаким ПО будет работать? Каковы пределы масштабирования? Универсальная СХД или специализированная? Минимизация капитальных или эксплуатационных расходов? Диск или лента? Решение от единого вендора (IBM?) или множества вендоров? Корпоративные правила …
  • 20.
    20 Факторы сложности выбора Информационнаязакрытость •вендоры геофизического ПО •вендоры инфраструктуры Отсутствие специалистов с широким кругозором, глубокими знаниями и практическим опытом •у заказчика •у вендоров геофизического ПО •у вендоров инфраструктуры •у интеграторов Пристрастность продавцов •продают продукт, а не решение задачи Дороговизна и длительность стендовых испытаний
  • 21.
    21 «СетьПроект» — правильныйинтегратор Партнерство с ключевыми вендорами СХД •NetApp, Panasas, IBM, EMC, Intel, Quantum, … Партнерство с вендорами геофизического ПО: •Paradigm, KADME Специализация на нефтегазовой отрасли •и опыт работы с другими отраслями Продвинутые технологии управления проектами Опыт разнообразных проектов Квалифицированный персонал
  • 22.