Successfully reported this slideshow.
We use your LinkedIn profile and activity data to personalize ads and to show you more relevant ads. You can change your ad preferences anytime.

Teradata. Возможности организации обработки больших и сверхбольших массивов данных.

1,025 views

Published on

Международный Логистический Клуб. 20140827. Электронное взаимодействие при организации трансграничных логистических процессов.

  • Be the first to comment

  • Be the first to like this

Teradata. Возможности организации обработки больших и сверхбольших массивов данных.

  1. 1. ВОЗМОЖНОСТИ ОРГАНИЗАЦИИ ОБРАБОТКИ БОЛЬШИХ И СВЕРХБОЛЬШИХ МАССИВОВ ДАННЫХ Алексей Галаган
  2. 2. Решения Teradata для управления данными 6XX 17XX 67XX 27XX 2 9/1/2014 Teradata Confidential 7XX Мировой лидер в области хранилищ данных • Top 10 мировых публичных компаний ПО • Top 10 стратегических IT вендоров Глобальное присутствие • 2,500+ заказчиков в 77 странах • 10,000+ сотрудников Финансовые результаты (2013 г.) • Оборот более $2.5 млрд. • Рыночная капитализация более $10млрд. Data Mart Appliance Extreme Data Appliance Data Warehouse Appliance Active Enterprise Data Warehouse Appliance for Hadoop Aster Big Analytics Appliance SAS High Performance Analytics Масштаби руемость до 12TB до 186PB до 22PB до 61PB до 10PB до 5PB до 52TB Тип задач Тестирование/ Разработка небольших витрин данных Аналитический архив, обеспечивающий глубокое погружение в данные Стратегическая аналитика, система поддержки принятия решений, быстрое сканирование Стратегическая и операционная аналитика, обновление данных в реальном времени, активные нагрузки Платформа для загрузки, хранения и предобработки данных на основе Hadoop 1.3.2/2.1 Платформа для анализа Больших данных с поддержкой SQL MapReduce для новых типов и источников данных Выделенное решение для реализации модели SAS high-performance analytics
  3. 3. Цели Транспортной стратегии России 3 9/1/2014 Teradata Confidential Целевые индикаторы ТС РФ №1. Формирование единого транспортного пространства России на базе сбалансированного развития эффективной транспортной инфраструктуры Создание единой централизованной модели транспортного комплекса на базе высоконадежной, масштабируемой платформы, оптимизированной под задачи отрасли №2. Обеспечение доступности, объема и конкурентоспособности транспортных услуг по критериям качества для грузовладельцев на уровне потребностей инновационного развития экономики страны Создание бизнес сервисов, обеспечивающих грузовладельцев полной, согласованной, актуальной информацией. №3. Обеспечение доступности и качества транспортных услуг для населения в соответствии с социальными стандартами Моделирование пассажиропотоков, привязка единой транспортной модели к планам регионального развития, миграционным потокам, пропускным возможностям транспортных узлов №4. Интеграция в мировое транспортное пространство и реализация транзитного потенциала страны Переход на международные протоколы информационного взаимодействия на базе транснациональных индустриальных моделей №5. Повышение уровня безопасности транспортной системы Ситуационные центры и системы оперативного мониторинга на базе активных хранилищ данных
  4. 4. Управление транспортным комплексом на основе детальной аналитики Data Warehouse Advanced Analytics 4 9/1/2014 Teradata Confidential Integrated Data Warehouse (IDW) SQL Framework Access Layer Integrated Discovery Platform (IDP) Pre-Built Analytics Functions 1 2 3 4
  5. 5. Новая парадигма анализа От визуализации агрегатов к комплексному исследованию детальных данных Кластеризация Многомерные бизнес индикаторы и геопривязка потоков потоков и анализ графов Санкей диаграммы, мощность событийных потоков 5 9/1/2014 Teradata Confidential
  6. 6. Управление наземного транспорта Сингапура Проект PLANET Цели и вызовы Управление наземного транспорта Сингапура планирует, организует и обслуживает транспортную инфраструктуру города. Население мегаполиса превышает 5 миллионов человек – особенно актуальными являются следующие задачи: • Оптимизация транспортной системы – повышение пропускной способности, сокращение общего времени поездки, повышение уровня комфорта при перемещении по городу для пассажиров общественного транспорта • Формирование политики в области транспорта на детальных, достоверных данных • Стратегическое планирование и операционное управление комплексом за счет мониторинга показателей наземного транспорта • Использование информационной системы для решения задач управления и прогнозирования Решение Модель транспортной системы и логическая модель данных Teradata Хранилище данных Teradata Данные: • о билетах на общественный транспорт • о поездках частных а/м • о загруженности дорог Объём данных: • 4.6 млрд. записей за 3 года 6 9/1/2014 Teradata Confidential Результат Формирование транспортной политики на достоверных данных Мониторинг и анализ показателей функционирования транспортной системы Моделирование и прогнозирование поведения транспортной системы Прогнозирование загруженности дорог с точностью более 80% Планирование мощности транспортной системы Оптимизация маршрутов общественного транспорта Расчёт тарифов общественного транспорта и проезда по платным дорогам Повышение эффективности работы сотрудников на 13% Снижение затрат на ИТ на 19% в год
  7. 7. Таможенная служба Швейцарии Цели и вызовы Таможенная служба Швейцарии решает следующие задачи: борьба с незаконной иммиграцией и криминальными явлениями, защита населения и окружающей среды, общественная безопасность, контроль импорта/экспорта и проведения досмотров, проверка уплаты налогов и сборов на границе, сбор детальных данных и статистики о перемещении пассажиров и грузов. Источники данных: • Электронные таможенные декларации • Данные о перемещении по платным автодорогам • NCTS – глобальная электронная система таможенных деклараций Евросоюза и Европейской ассоциации свободной торговли Решение Логическая модель данных Teradata Хранилище данных Teradata Данные: • 16 млн. деклараций на импорт • 6.5 млн. деклараций на экспорт • 7.5 млн. транзитных регистраций • 23 млрд. CHF таможенных поступлений – 30% бюджета Швейцарии 7 9/1/2014 Teradata Confidential Результат • Аналитическая и оперативная отчётность в режиме реального времени • Анализ рисков • Сегментация клиентов таможенной службы • Мониторинг показателей эффективности • Контроль уплаты налогов и сборов • Мониторинг перемещения граждан • Повышение эффективности работы сотрудников таможни • Возможность использования данных хранилища для вероятностной оценки потенциального мошенничества
  8. 8. Преимущества партнерского подхода АЦ «Концепт» и Teradata - синергия методологии и технологического потенциала АЦ «Концепт» - лидер в методологии анализа и прогнозного моделирования ТК: Опыт реализации профильных проектов в транспортной отрасли РФ Собственная научно- методологическая база Штат специалистов в области автоматизации прогнозных и аналитических задач Teradata – лидер в создании высоко эффективных решений по хранению и обработке больших объемов данных Научно-технологическая кооперация позволяет эффективно решать задачи, сформулированные в Транспортной стратегии РФ, в части моделирования и прогнозирования транспортных потоков 8 9/1/2014 Teradata Confidential Опыт в реализации крупных международных проектов управления ТК Собственная методология проектирования промышленных хранилищ данных, тиражируемая референтная модель данных Штат специалистов в РФ, реализующий проекты федерального уровня

×