Слоны в облаках

849 views

Published on

0 Comments
0 Likes
Statistics
Notes
  • Be the first to comment

  • Be the first to like this

No Downloads
Views
Total views
849
On SlideShare
0
From Embeds
0
Number of Embeds
270
Actions
Shares
0
Downloads
7
Comments
0
Likes
0
Embeds 0
No embeds

No notes for slide

Слоны в облаках

  1. 1. Слоны в облакахработаем с Hadoop в Windows Azure Владимир Юнев Microsoft
  2. 2. Big Data и Microsoft Как мы поддерживаем HadoopAgenda Hadoop в Windows Azure как сервис по требованию
  3. 3. Насколько«Big Data»биг сегодня?
  4. 4. 1 PETABYTE данных в секунду получает Большой адронный коллайдерCERN
  5. 5. 900080007000600050004000300020001000 0 2005 2008 2015
  6. 6. Интернет видео – 18 Экзабайт в месяц Мобильный трафик – 2 Экзабайта в месяц В 2011 году Фейсбук перенес 11 Петабайт данных в свой Hadoop кластерBig «Big Data» Пользователи Twitter создают более 1 терабайта сообщений в день Cisco предполагает что к 2013 интернет трафик достигнет величины 667 экзабайт ( в год ), а к 2015 – превысит 1 Зеттабайт
  7. 7. Bigunstructureddata* by Gartner
  8. 8. 4 триллиона объектов в Windows AzureMicrosoftи Big Data Bing скачивает 7 петабайт данных в месяц
  9. 9. 500 миллионов активных аккаунтов Microsoft Account 460 миллионов уникальных пользователей MSN в месяц 355 миллионов пользователей почты HotmailMicrosoftи Big Data 5.5+ миллиардов запросов к Bing в месяц 40 миллионов активных пользователей Xbox Live 14 миллиардов показов рекламы Microsoft Advertising в месяц 2-4 миллиарда писем в Office 365 ежедневно
  10. 10. Microsoftи Apache Hadoop
  11. 11. Microsoft - Platinum SponsorApache Software Foundation SQL Server Connector for Apache Hadoop www.microsoft.com/download/en/details.aspx?id=27584 Open source Hadoop .NET SDK http://hadoopsdk.codeplex.com/Microsoft Hive Add-in for Excel и Hive ODBC Driverи ApacheHadoop Microsoft HDInsight – 100% Hadoop для Windows Server http://www.microsoft.com/bigdata Windows Azure HDInsight http://HadoopOnAzure.com
  12. 12. HDInsight на сервере и в облаке 100% opensource-реализация платформы Apache Hadoop знакомые инструменты для работы с данными (Excel, BI) HDFS, MapReduce, Pig, Hive, Zookeeper, Mahout, …Microsoft интеграция с SQL Server, обмен даннымиHDInsight быстрое развертывание инструменты управления Apache Ambari+System Center интеграция и безопасность с Active Directory доступ к сервису по требованию к облаке Windows Azure
  13. 13. SQL Server 2012 Parallel Data Warehouse движок PolyBase для запросов между реляционными данными и данными Hadoop Connector for Apache Hadoop для перемещения данных из SQL Server в HDFS и обратноАнонс загрузка данных с SQL Server Integration ServicesPASS Summit аналитика, MOLAP-кубы с SQL Server Analysis Services и визуализация с PowerPivot for Excel интеграция с MicroStrategy, SAP Business Objects, SAS выход в 2013 году
  14. 14. Hadoop cluster Hadoop clusterМогут лислоны летатьв облаках?
  15. 15. WindowsAzure
  16. 16. Кластер по запросуWindows AzureHDInsight Кластер по запросу
  17. 17. Созданиекластера
  18. 18. Работа с HadoopДемо в Windows Azure
  19. 19. Microsoft вкладывает силы и средства в Apache Hadoop HDInsight – 100% Hadoop от MicrosoftЗаключение Hadoop как сервис по требованию доступен в Windows Azure Слоны могут летать в облаках!
  20. 20. Владимир Юнев эксперт по стратегическим технологиям, Microsoft vyunev@microsoft.com Twitter - @XaocCPSВсем спасибо! Facebook – facebook.com/YunevВаши вопросы Blog – blogs.msdn.com/b/vyunev http://www.microsoft.com/bigdata http://HadoopOnAzure.com WindowsAzure.com AzureHub.ru

×