Life cycle of Data Scientist: Database architecture - Bojan Sovilj
•Download as PPTX, PDF•
1 like•262 views
Once, Conway said that a true Data Scientist should have Hacking Skills, Math & Statistics Knowledge, as well as Substantive Expertise. On this presentation we will see how does a Life cycle of Data Scientist looks like on an example of the label machine.
Recommended
Recommended
More Related Content
More from Institute of Contemporary Sciences
More from Institute of Contemporary Sciences (20)
Life cycle of Data Scientist: Database architecture - Bojan Sovilj
- 4. Koja je algoritamska kompleksnost izgradnje B Tree indexa za tabelu koja broji 17 miliona row-a? Sta sve baza podataka (i operativni sistem ;) treba da urade da bi se insertovao jedan slog u tabelu? Kako koristiti bazu podataka za ono sto joj je u sustini svrha? Takticka i strateska analitika. Sistemski inzenjering, Administracija baze podataka, Tehnicka infrastruktura... Relaciona algebra... ili ono sto smo zaboravili o bazama podataka? :|
- 5. Uvod u problem izračunljivosti!
- 6. Uvod u problem izračunljivosti! Stao na vagu Zaustavio Dolivanje lepka Zaustavio Zaustavio Nestabilan signal
- 7. Dobar pravac
- 8. Ekspresivnost (san dobroga programera) C# ?
- 9. Ekspresivnost (onelineR) dcharge <- dcast(charge, FrameNumber + Timestamp ~ Sensor, value.var = "Value")
- 10. Ekspresivnost (vektorizacija) frame timestamp lc1 lc1.1 lc1.2 ... lc1.50 lc2 lc2.1 ... lc1dif lc1.2dif lc1.3dif ... lc1.50diff stability1 stability2 ...
- 11. Predvidjanje - 20MA smoother ili simple exponential ili Holt linear? lc(n+1) = lc(n) + 20MA(lc.dif)
- 12. Predvidjanje - 20MA smoother ili simple exponential ili Holt linear? lc(n+1) = (1-x)* lc(n) + x * lc.dif(n) lc(n+1) = (1-x) * ((1-x)* lc(n-1) + x * lc.dif(n-1)) + x * (lc.dif(n)) ... lc(n+1) = p(n)*lc(1) + p(n-1)*lc.dif(1) + p(n-2)*lc.dif(2) + … p(1)*lc.dif(1)
- 13. Arhitektura
- 14. Hvala
Editor's Notes
- 4. Arhitektura baze. Kada danas nekome kazete da vam je potrebno mesec dana da isprojektujete bazu podataka ispadnete smesni. Ali cekajte principi projektovanja baza podataka nisu se izmenili. Konecptualni model, pa logicki model, pa tek onda fizicki model. Gde je to danas. Pojavom ORM alata izgubljena je komunikacija programera sa bazom podataka i tamo je nastao krs. Nikada nemojte gubiti iz vida da su relacione baze velika sila. U ovom slucaju imali smo sledece. Podaci o senzorima spustali su se u jednu tabelu odakle je vrsena kalkulacija, a iskalkulisani podaci su ubaceni u drugu tabelu. Iz te tabele su se citale informacije za prikaz na izvestajima. Ta tabela imala je 17 miliona row-a. U momentu kada je sarza aktivna