2. Data Engineer & Big Data
Programming?
Peran Programming
dalam Data
Engineering.
Apa itu Data Engineer.
Big Data?
Apa itu Big Data.
Python?
Kenapa Menggunakan
Python
Data Engineer?
04
01
03
02
3. BIG DATA?
Big Data merupakan kumpulan data yang
volume datanya super besar, memiliki
keragaman sumber data yang tinggi, sehingga
perlu dikelola dengan metode dan perangkat
bantu yang kinerjanya sesuai
( Maryanto,2017)
4.
5. Planet Mercury is the closest object to the Sun
Siapa yang mengelola data tersebut?
Jadi yang mengelola data tersebut adalah DATA ENGINEER .
Data Engineer merupakan orang yang membuat & mengelola arsitektur
data di perusahaan, yang di dalamnya terdapat data Infrastruktur, data
applications, data warehouse dan data pipelines untuk membantu para
analyst menghasilkan insights.
6. 6
Planet Mercury is the closest object to the Sun
Apa Peranan Data Engineer?
DATA ENGINEER berperan membantu para analyst menghasilkan
insights.
Maksudnya yaitu menyediakan data yang siap di analisis oleh user
dari Data Engineer.
7. 01
02
03
04
05
06
Analyst yang menjadi User dari Data Engineer
Data Scientist
DS
Data Analyst
DA
Business Analyst
BA
Business Intellience
BI
Marketing Analyst
MA
Machine Learning Engineer
MLE
7
8. Workflow Dan
Tools
Lalu, Workflow dan
Tools apa yang
digunakan dalam
mengelola Data
tersebut?
Dalam Data Engineer mengenal dua bentuk workflownya yaitu :
ETL (Extract-Transform-Load) maupun ELT (Extract-Load-Transform)
9. BIG DATA TOOLS
9
( Structured Query Language )
SQL
Not Only SQL
NOSQL
Airflow
Hadoop, Kafka, Spark
01
02
03
04
Docker
05
10. Bahasa Pemrograman Dalam Data Engineering
10
Dalam Data Engineering umumnya
menggunakan Bahasa Pemrograman
Python, Java/Scala, SQL dan R.
Data Engineer menggunakan Python Karena
sintaks yang dimiliki Python mudah
dipahami dan memiliki library yang
beragam, sangat banyak dan di dukung oleh
komunitas yang sangat besar.
11. 11
Apa itu data type
Setiap data memiliki nilai dan setiap nilai memiliki jenis, ada
data bertipe angka, huruf, maupun benar atau salah atau
sebagainya.
Sebagai ibarat, jika variabel adalah keranjang maka tipe data
adalah jenis barang yang akan dimasukkan ke dalam keranjang
12. 12
Apa itu collections
Merupakan suatu jenis atau tipe data yang dingunakan untuk
menghimpun kumpulan data atau data yang lebih dari satu.
Python memiliki empat tipe data, yaitu
1. List
2. Tuple
3. Set
4. Dictionary
13. 13
Apa itu Library atau
Module
Libary dalam Python merupakan gabungan dari sekumpulan
package serta module dengan fungsionalitas sama dalam
tujuan memudahkan dalam membuat suatu aplikasi dengan
penggunaan sedikit kode.
Module pada python merupakan sebuah file yang berisikan
sekumpulan kode fungsi, class dan variabel yang disimpan
dalam satu file berekstensi
