Python в ядре Яндекс.Диска

•Download as PPTX, PDF•

2 likes•1,834 views

Я расскажу о том, как мы используем Python в Яндекс.Диске, какие применяем библиотеки и фреймворки, какие задачи решаем и с какими проблемами сталкиваемся. Также затрону тему логирования и обработки асинхронных операций.

Internet

Яндекс.Диск:
Использование Python
Иващенко Сергей, Яндекс

Архитектура Яндекс.Диска
MPFS
WebDAV Веб интерфейс REST API

Архитектура Яндекс.Диска
MPFS
WebDAV Веб интерфейс REST API
Кладун
Заберун

Архитектура Яндекс.Диска
MPFS
WebDAV Веб интерфейс REST API
Кладун
Заберун
Mulca

Архитектура Яндекс.Диска
MPFS
WebDAV Веб интерфейс REST API
Кладун
Заберун
MongoDB
Mulca

Архитектура Яндекс.Диска
MPFS
WebDAV Веб интерфейс REST API
Кладун
Заберун
Почта
Фотки
Музыка
MongoDB
Mulca

•Скорость разработки
•Распространённость

Проблема 2. Какие технологии
использовать?

Проблема 3
В системе есть длительные задачи, их
можно выполнять асинхронно. Как это
сделать?

Асинхронные задачи
•Operations – для сложных составных задач

Асинхронные задачи
•Operations – для сложных составных задач
Queue – для небольших атомарных задач

2014-07-10 19:53:41,563 [30180] web-111-ufodev
30180_10104 __init__ GET /json/status?oid=111&uid=222 HTTP/1.1 200 0.0
2014-07-10 19:53:12,007 [30182] mac-JTWz_1_LXK-1-webdav 30182_10618 __
GET /json/info?uid=0&path=/disk/photo.png HTTP/1.1 200 0.045

Pyrasite
$ pyrasite-shell 26234
Pyrasite Shell 2.0 C
(DistantInteractiveConsole)

• Python – хороший язык, позволяющий быстро
разрабатывать сложные сервисы
• При выборе готовых решений всегда помните о целях
• Каждому инструменту – свою задачу
Выводы

Disk API
•
http://api.yandex.ru/disk/
• RESTful API
• WebDAV API + SDK (iOS, Android, WP)

Иващенко Сергей
triklozoid@yandex-team.ru
http://api.yandex.ru/disk/
Спасибо за внимание!

What's hot

Highway to Сontinuous Integration, Денис Трифонов (2GIS)Ontico

Доклад Юрия Насретдинова на РИТ++ 2013. "Система перевода в Badoo".Badoo Development

Опыт использования Erlang в разработке многопользовательской игрыYuri Zhloba

Erlang&railsMax Lapshin

Максим Лапшин — введение в ErlangАлександр Ежов

1. Введение в JavaDEVTYPE

«CI. Jenkins. 2GIS» — Игорь Павлов, 2ГИС DevDay

Thank you miyagawa (русская версия)Anatoly Sharifulin

мифы о спарке Evgeny Borisov

Erlang rubyYuri Zhloba

Сергей Кокшаров. Особенности SEO для сайтов на JavaScriptDariaShalahinova

Лучшие практики CI/CD с Kubernetes и GitLab / Дмитрий Столяров (Флант)Ontico

Что и почему писать на ErlangMax Lapshin

Разделяй и властвуй!Vitebsk Miniq

Rootconf-2015 Тестируем инфраструктуру как кодIgor Kurochkin

Server Side Javascript (ru)Bakyt Niyazov

Open Source − это не больно (Сергей Нартымов)Olga Lavrentieva

Erlang for YandexMax Lapshin

«Как ради производительности высоконагруженного приложения мы разработали соб...Nata_Churda

What's hot (19)

Highway to Сontinuous Integration, Денис Трифонов (2GIS)

Доклад Юрия Насретдинова на РИТ++ 2013. "Система перевода в Badoo".

Опыт использования Erlang в разработке многопользовательской игры

Erlang&rails

Максим Лапшин — введение в Erlang

1. Введение в Java

«CI. Jenkins. 2GIS» — Игорь Павлов, 2ГИС

Thank you miyagawa (русская версия)

мифы о спарке

Erlang ruby

Сергей Кокшаров. Особенности SEO для сайтов на JavaScript

Лучшие практики CI/CD с Kubernetes и GitLab / Дмитрий Столяров (Флант)

Что и почему писать на Erlang

Разделяй и властвуй!

Rootconf-2015 Тестируем инфраструктуру как код

Server Side Javascript (ru)

Open Source − это не больно (Сергей Нартымов)

Erlang for Yandex

«Как ради производительности высоконагруженного приложения мы разработали соб...

Similar to Python в ядре Яндекс.Диска

Переводим без интернета: как мы делали Яндекс.Перевод для iOS, Иван МоскалёвYandex

Владимир Русинов, Алексей Капранов "Яндекс.Диск: архитектура, синхронизация и...Yandex

Фронтенд разработка без болиAnton Piskunov

Sivkokuchinskaya

.NET DevelopmentAlexander Babich

Гатиятов Руслан, технический директор ООО “Дроид Лабс”: “Система управления п...Provectus

Встраивание Python в мобильные приложения – нюансы interoperation, новые подх...Anthony Marchenko

Когда технологий много - iForum 2013Andrey Listochkin

Фронтенд в ЯндексеYandex

Елизавета Голенок Переходим на mono или как это былоMskDotNet Community

Владислав Акулич - Monkey Talk - кроссплатформенное средство автоматизации те...COMAQA.BY

Экскурс в мир WEB разработкиIT-Доминанта

Ликбез по веб-технологиямAlexey Simonenko

Symfony в архитектуре Upwork EnterpriseDmitry Semenov

Что нового в ASP.NET 5Microsoft

Денис Чистяков — JavaScript на фронте и в тылуYandex

Фронтенд в ЯндексеYandex

"Портирование Web SDK с JS на TS" Петров Григорий, Voximplantit-people

Monkey Talk - кросс-платформенное средство автоматизации тестирования мобильн...SQALab

Similar to Python в ядре Яндекс.Диска (20)

Переводим без интернета: как мы делали Яндекс.Перевод для iOS, Иван Москалёв

Владимир Русинов, Алексей Капранов "Яндекс.Диск: архитектура, синхронизация и...

Фронтенд разработка без боли

Sivko

.NET Development

Гатиятов Руслан, технический директор ООО “Дроид Лабс”: “Система управления п...

Встраивание Python в мобильные приложения – нюансы interoperation, новые подх...

Когда технологий много - iForum 2013

Фронтенд в Яндексе

Елизавета Голенок Переходим на mono или как это было

Владислав Акулич - Monkey Talk - кроссплатформенное средство автоматизации те...

Экскурс в мир WEB разработки

Ликбез по веб-технологиям

Symfony в архитектуре Upwork Enterprise

Что нового в ASP.NET 5

Денис Чистяков — JavaScript на фронте и в тылу

Фронтенд в Яндексе

"Портирование Web SDK с JS на TS" Петров Григорий, Voximplant

Monkey Talk - кросс-платформенное средство автоматизации тестирования мобильн...

More from Yandex

Предсказание оттока игроков из World of TanksYandex

Как принять/организовать работу по поисковой оптимизации сайта, Сергей Царик,...Yandex

Структурированные данные, Юлия Тихоход, лекция в Школе вебмастеров ЯндексаYandex

Представление сайта в поиске, Сергей Лысенко, лекция в Школе вебмастеров ЯндексаYandex

Плохие методы продвижения сайта, Екатерины Гладких, лекция в Школе вебмастеро...Yandex

Основные принципы ранжирования, Сергей Царик и Антон Роменский, лекция в Школ...Yandex

Основные принципы индексирования сайта, Александр Смирнов, лекция в Школе веб...Yandex

Мобильное приложение: как и зачем, Александр Лукин, лекция в Школе вебмастеро...Yandex

Сайты на мобильных устройствах, Олег Ножичкин, лекция в Школе вебмастеров Янд...Yandex

Качественная аналитика сайта, Юрий Батиевский, лекция в Школе вебмастеров Янд...Yandex

Что можно и что нужно измерять на сайте, Петр Аброськин, лекция в Школе вебма...Yandex

Как правильно поставить ТЗ на создание сайта, Алексей Бородкин, лекция в Школ...Yandex

Как защитить свой сайт, Пётр Волков, лекция в Школе вебмастеровYandex

Как правильно составить структуру сайта, Дмитрий Сатин, лекция в Школе вебмас...Yandex

Технические особенности создания сайта, Дмитрий Васильева, лекция в Школе веб...Yandex

Конструкторы для отдельных элементов сайта, Елена Першина, лекция в Школе веб...Yandex

Контент для интернет-магазинов, Катерина Ерошина, лекция в Школе вебмастеров ...Yandex

Как написать хороший текст для сайта, Катерина Ерошина, лекция в Школе вебмас...Yandex

Usability и дизайн - как не помешать пользователю, Алексей Иванов, лекция в Ш...Yandex

Cайт. Зачем он и каким должен быть, Алексей Иванов, лекция в Школе вебмастеро...Yandex

More from Yandex (20)

Предсказание оттока игроков из World of Tanks

Как принять/организовать работу по поисковой оптимизации сайта, Сергей Царик,...

Структурированные данные, Юлия Тихоход, лекция в Школе вебмастеров Яндекса

Представление сайта в поиске, Сергей Лысенко, лекция в Школе вебмастеров Яндекса

Плохие методы продвижения сайта, Екатерины Гладких, лекция в Школе вебмастеро...

Основные принципы ранжирования, Сергей Царик и Антон Роменский, лекция в Школ...

Основные принципы индексирования сайта, Александр Смирнов, лекция в Школе веб...

Мобильное приложение: как и зачем, Александр Лукин, лекция в Школе вебмастеро...

Сайты на мобильных устройствах, Олег Ножичкин, лекция в Школе вебмастеров Янд...

Качественная аналитика сайта, Юрий Батиевский, лекция в Школе вебмастеров Янд...

Что можно и что нужно измерять на сайте, Петр Аброськин, лекция в Школе вебма...

Как правильно поставить ТЗ на создание сайта, Алексей Бородкин, лекция в Школ...

Как защитить свой сайт, Пётр Волков, лекция в Школе вебмастеров

Как правильно составить структуру сайта, Дмитрий Сатин, лекция в Школе вебмас...

Технические особенности создания сайта, Дмитрий Васильева, лекция в Школе веб...

Конструкторы для отдельных элементов сайта, Елена Першина, лекция в Школе веб...

Контент для интернет-магазинов, Катерина Ерошина, лекция в Школе вебмастеров ...

Как написать хороший текст для сайта, Катерина Ерошина, лекция в Школе вебмас...

Usability и дизайн - как не помешать пользователю, Алексей Иванов, лекция в Ш...

Cайт. Зачем он и каким должен быть, Алексей Иванов, лекция в Школе вебмастеро...