Download as PDF, PPTX
Uploaded byMaxim Shalamov
Подключение внешних библиотек в python
Документ обсуждает использование Cython, SWIG, FFI, ctypes и cffi для повышения производительности Python-программ за счет интеграции C/C++ кода. Он описывает особенности каждого инструмента, их преимущества и недостатки, а также предоставляет примеры компиляции и работы с ними. В заключение, документ подчеркивает наличие вакансий в компании Rambler&Co для желающих развивать свои профессиональные навыки.
Подключение внешних библиотек в python
- 1. Скрещиваем ежа сужом или как подружить питон и… Шаламов Максим ведущий Python-разработчик в Rambler&Co
- 3. 40 50+ 500+1500 млн человек суммарная аудитория группы количество изданий, сервисов и проектов разработчиков человек в хорошей компании
- 4.
- 5.
- 6. Контакты В группе компанийRambler&Co всегда есть открытые вакансии для тех, кто хочет профессионально расти и развиваться, занимаясь тем, что по-настоящему нравится hr@rambler-co.ru www.rambler-co.ru/jobs !
- 7. Python отличный язык •Много синтаксического сахара • Много батареек • Большое сообщество
- 8. Что обычно относятк недостаткам • Медленный • Нет реальной многопоточности
- 9. О чем пойдетречь? • Как решить указанные проблемы с использованием языка С • Cython • C extension • SWIG • FFI • ctypes • cffi
- 10. Но использовать Стак сложно…
- 11. Зачем нам подключать внешниебиблиотеки • Увеличение скорости работы алгоритмов • Реальная многопоточность • Использование уже существующего функционала, написанного на C
- 12. CPython native Cextensions • Относительно сложно и долго • Тема для отдельного доклада • Пример: https://goo.gl/lq3NZS • Пример: http://goo.gl/wfpn2V
- 13. Что такое Cython? •Язык программирования, упрощающий написание модулей С/С++ кода для Python. • Код Cython преобразуется в С/С++ код для последующей компиляции. • Поддерживает прямой вызов функций и методов С/С++ из кода на Cython и строгую типизацию переменных, классов, атрибутов классов. • Имеет очень близкий синтаксис к Python.
- 14. Как это работает? •Пишем код в файле с расширением pyx • В setup.py файле указываем параметры компиляции • Компилируем: python setup.py build_ext — inplace • Импортируем полученный результат как обычный модуль
- 15.
- 16.
- 17. Минусы • Пока естьнесовместимости с CPython, которые планируют устранить к версии 1.0 • Это новый язык
- 18. Полезные ссылки • Работас numpy (http://goo.gl/P42HyT) • Перевод документации v0.15 (http://goo.gl/ a76BvY)
- 19. SWIG • Создает частьоберток на С/C++, часть на Python • Есть особенности под разные платформы
- 20. SWIG (общий подход) •Нам нужен файл с кодом *.c • Создаем интерфейсный файл *.i, в котором описываем подключенный файл и функции • Выполняем команды компиляции • Импортируем полученный модуль в код на Python
- 21. Полезные ссылки • Примерна русском: http://goo.gl/yCX6EO • Документация: http://goo.gl/rNQxtQ
- 22. FFI - ForeignFunction Interface • интерфейс вызова внешних функций • позволяет программам, написанным на одном языке вызывать программы написанные на другом языке
- 23. Плюсы ffi • ffiрасширения можно компилировать или подключать в runtime • ffi расширения мультиплатформенные • ffi расширения просты для понимания и написания
- 24. libffi • Она обеспечиваетинтерфейс на языке С для вызова функций во время выполнения, а не во время компиляции • Может указывать на функцию, которая обрабатывает любое количество аргументов определенных в runtime
- 25. ffi в python •ctypes • cffi
- 26. ctypes • это C-расширение,ссылающееся на libffi и Python код для связки с ней • позволяет вызвать внешние C-функции из Python кода • может использоваться для написания оберток над внешними библиотеками • часть стандартной библиотеки Python • Минусы: • сложный api
- 27. ctypes пример • Опустимреализацию функции merge
- 28.
- 29. Полезные ссылки • Документация:https://goo.gl/FBfdrK • Пример на русском: http://goo.gl/bv7BTt • Пример с opencv: https://goo.gl/cpzLMt
- 30. cffi • Нужны знаниятолько языков C и Python • Основная логика пишется на Python, на C пишется только то, что необходимо • Позволяет избежать излишних C-объявлений, сам находит объявление функций и переменных • Работа с С-библиотекой, как с Python библиотекой • Минусы • Не входит в стандартную библиотеку Python
- 31.
- 32.
- 33.
- 34. Полезные ссылки • Документация:http://goo.gl/K15xMS • Пример: https://goo.gl/DYOjc2
- 35. cffi vs ctypes •Делают одно и тоже • Дело вкуса
- 36. Личное мнение • Самыйсложный и мощный инструмент: • C extensions • Самый простой и удобный инструмент: • cffi, ctypes • Самый простой способ ускорить алгоритм: • Cython • Самой простой способ подключать C++ библиотеки: • SWIG, Cython
- 37.
- 38. Контакты В группе компанийRambler&Co всегда есть открытые вакансии для тех, кто хочет профессионально расти и развиваться, занимаясь тем, что по-настоящему нравится hr@rambler-co.ru www.rambler-co.ru/jobs !