Лекция 6: Работа с данными. Django ORM

1. Работа с базой.
Django ORM
СергейЛихобабин
Техносфера.2014

2. Где хранить данные
На клиенте
Cookie (4кб)
Web Storage
На сервере
В памяти
На диске
На диске и в памяти

3. Работа с базой
Представление о СУБД
Проектирование БД
Основные операции SQL
Работа с БДв Python
Работа с БДв Django

4. БД
Взаимосвязанные даные специальным образом
хранящиеся на каком-либо носителе
СУБД
Программный комплекс обеспечивающий работу с
данными в БД

5. Функции СУБД
Управление данными на дисках и в
оперативной памяти
Журнализация, резервное копирование

6. Реляционная модель
данных
Таблица -отношение, relation
Строка -кортеж, tuple
Столбец -атрибут, column

7. Реляционная модель
данных

8. Реляционная модель
данных

9. Задачи проектирования
Обеспечение хранения всей необходимой
информации
Обеспечение возможности получения данных
по всем запросам
Сокращение избыточности и дублирования
данных
Обеспечение целостности данных

10. Проектирование на
практике
Логическое разделение сущностей
Выделение первичных ключей
Связи 1:Nреализуются через внешний ключ
Связи N:M реализуются через промежуточную
таблицу
Аттрибут с фиксированным числом значений -
внешняя таблица либо enum

11. Основные операции SQL

12. SELECT
ELECT*FROMusersWHEREage>10;
ELECT*FROMusersWHEREname='masha';
ELECTMAX(age)FROMusers;
ELECTid,name,LENGTH(name)ASlen
ROMusers
HEREemailLIKE'%@mail.ru'ANDage>10
RDERBYnameDESC
IMIT10OFFSET15;

13. Агрегатные функции
COUNT, SUM, AVG, GROUP
ELECTname,count(id)cnt
ROMusers
ROUPBYname
RDERBYcnt
AVINGcnt>1

14. Join
ELECTh.name,a.name
ROMheroesh,abilitiesa
HEREh.id=a.hero_id;
ELECTh.name,a.name
ROMheroesh
NNERJOINabilitiesaONh.id=a.hero_id;
ELECTh.name,a.name
ROMheroesh
EFTJOINabilitiesaONh.id=a.hero_id;

15. Вложенные запросы
ELECTtitle
ROMarticlet1
OIN(
SELECTrubric_id,MAX(id)max_id
FROMarticle
GROUPBYrubric_idLIMIT5
t2
t1.id=t2.max_id;

16. INSERT, UPDATE, DELETE
NSERTINTOusers(name,age)VALUES('Petr',10);
PDATEusersSETage=20WHEREname='Petr';
PDATEusersSETrating=rating+1;
ELETEFROMusersWHEREname='Masha';
ELETEFROMusersWHEREage>150;

17. Индексы

18. Индексы на практике
Индексы для полей, по которым происходит
JOIN
Индексы для полей, по которым фильтруются
записи
Индексы для полей, по которым идет
сортировка
Проверять план выполнения запроса EXPLAIN
Управление оптимизатором запросов

19. Работа с БД в python

20. MySQLdb
mportMySQLdb
b=MySQLdb.connect(
host="localhost",user="bob",
passwd="secret",db="goodies"
ursor=db.cursor()

21. MySQLdb
ursor.execute(
'updateuserssetage=age+1wherename=%s',(name,)
ursor.execute('select*fromusers')
sers=cursor.fetchall()
ursor.execute(
'select*fromuserswherename=%s',(name,)
ser=cursor.fetchone()

22. MySQLdb
ursor.executemany(
"INSERTINTOusers(name,age)VALUES(%s,%s)",
[
("Igor",18),
("Petr",16),
("Dasha",17)
]
b.close()

23. Плейсхолдеры
mail="'OR'1'='1"
ursor.execute(
"SELECT*FROMusersWHEREemail='%s'"%email

24. Работа с БД в django

25. Классы в python
lassEmployee(object):
def__init__(self,name,salary):
self.name=name
self.salary=salary
defget_info(self):
return"Name:%s,Salary:%s"%(self.name,self.sal
lassProgrammer(Employee):
def__init__(self,name,salary,lang):
super(Programmer,self).__init__(name,salary)
self.lang=lang

26. Классы в python
>>e1=Programmer(u'Vasya',100,'VB')
>>printu'Welcome%s'%e1
elcomeVasya
>>e1.get_info()
'Name:Vasya,Salary:100'
>>e1.lang
VB'

27. Raw SQL vs ORM
ursor.execute('select*fromuserswhereage>18')
oruserincursor.fetchall():
pk,name,age=user
printname
VS
oruserinUser.objects.filter(age__gt=18):
printuser.name

28. Модели и типы данных
lassPost(models.Model):
title=models.CharField(max_length=255)
content=models.TextField()
creation_date=models.DateTimeField(
default=datetime.datetime.now
)
def__unicode__(self):
returnself.title
defget_absolute_url(self):
return'/post/%d/'%self.pk
classMeta:
ordering=['-creation_date’]

29. Модели и типы данных

30. Связи между таблицами
lassPost(models.Model):
title=models.CharField(max_length=255)
content=models.TextField()
creation_date=models.DateTimeField(
default=datetime.datetime.now
)
category=models.ForeignKey(
Category,on_delete=models.SET_NULL
)
tags=models.ManyToManyField(Tag)

31. ForeignKey, OneToOne
ForeignKey= IntegerField + Constraint
OneToOneField = ForeignKey+ unique
post.categoryVS post.category_id
Обратная связь -category.post_set

32. ForeignKey, OneToOne
Реакция на удаление внешнего ключа
RESTRICT-> models.PROTECT
CASCADE -> models.CASCADE
SETNULL -> models.SET_NULL
NO ACTION-> models.DO_NOTHING

33. ManyToManyField
post.tags -related manager
Обратная связь -tag.post_set

34. ORM API
ythonmanage.pyshell
>>fromblog.modelsimportCategory,Post
>>fromdjango.dbimportconnection
>>#Вставкаизамена
>>c=Category(title="Python")
>>c.save()
>>c.id
>>c.title="AboutPython"
>>c.save()

35. ORM API
>>print'n'.join(q['sql']forqinconnection.queries)
NSERTINTO`blog_category`(`title`,
description`)VALUES('Python','')
ELECT(1)AS`a`FROM`blog_category`WHERE
blog_category`.`id`=1LIMIT1
PDATE`blog_category`SET`title`='About
ython',`description`=''WHERE
blog_category`.`id`=1

36. ORM API
>>Category.objects.all()
<Category:AboutPython>]
>>printCategory.objects.all().query
ELECT`blog_category`.`id`,
blog_category`.`title`,
blog_category`.`description`FROM`blog_category`
>>Category.objects.filter(id=1)
<Category:AboutPython>]
>>c=Category.objects.get(id=1)
>>c
Category:AboutPython>
>>c.post_set.all()

37. ORM API
>>c.post_set.create(title="Newpost",content="Manywords")
Post:Newpost>
>>c.post_set.count()
>>p=Post.objects.get(title="Newpost")
>>p.category
Category:AboutPython>
>>p.category_id
>>Post.objects.filter(category__title="AboutPython")
Post:Newpost>
>>c.delete()

38. Debug Toolbar
https://github.com/django-debug-
toolbar/django-debug-toolbar

39. Manager
slice [10:20]
.all(), .filter(), exclude(), .order_by()
.values(), .values_list()
.get(), .get_or_create(), .count(), .exists()
.select_related(), prefetch_related()
.update(), .delete()

40. RelatedManager
.create(**kwargs)
.add(obj1[, obj2, ...])
.remove(obj1[, obj2, ...])
.clear()

41. Ленивое выполнение
QuerySet
s=Category.objects.all()
notuser.is_admin:
qs=qs.filter(active=True)
rintqs.count()

42. Избегайте лишних
запросов в базу
Foreign keyкэшируется
ost.category
Queryset-нет
uestion_list=list(Question.objects.all())

43. Атомарное обновление
QuerySet
uestion.objects.filter(pk=10)
update(rating=models.F('rating')+1)

44. Полезные команды
Проверка моделей
ythonmanage.pyvalidate
Вывод SQL
ythonmanage.pysqlall<app_name>
</app_name>
Выполнение SQL в базе
ythonmanage.pysyncdb

45. Миграции
DROP DATABASE, CREATE DATABASE
DROP TABLE, CREATE TABLE
ALTERTABLE
South

46. South
Автоматическое создание миграций
Поддержка различных СУБД
Прямые и обратные миграции

47. Инициализация South
1. Создать миграцию
2. Применить миграцию
./manage.pyschemamigrationask--initial
./manage.pymigrateask

48. Миграция с South
1. Изменить модель
2. Создать миграцию
3. Применить миграцию
./manage.pyschemamigrationask--auto
/manage.pymigrateask

49. Полезные ссылки
MySQL
http://dev.mysql.com/doc/refman/5.5/en/index.html
Mysqldb http://mysql-
python.sourceforge.net/MySQLdb.html
Django http://docs.djangoproject.com/en/dev/
Django DebugToolbar https://github.com/django-
debug-toolbar/django-debug-toolbar

50. Спасибо за внимание
СергейЛихобабин
s.lihobabin@corp.mail.ru