Informatica pushdown optimization eğitimi

1
Informatica Pushdown Optimization

2
Bu bölümde…
 Pushdown Optimization Nedir ?
 Two-Pass Pushdown Nedir ?
 Partial Pushdown Nedir ?
 Full Pushdown Nedir ?
Ahmet Sedef

3
Pushdown Optimization Nedir…
 Performans ve esneklik sağlar.
 Database kaynaklarını kullanılır.
 Transformasyonlara göre şekillenir.
 SQL scriptleri ve geçici nesneler oluşturur (create &
drop).
Ahmet Sedef

4
Two-Pass Pushdown…
 Kaynak Transformasyon SQL üretimi,
 Mapping’de Source’dan gelen data ve transformasyonlar için
SQL üretir.
 Select SQL Cümleciklerini Üretir.
 Hedef Transformasyon SQL üretimi,
SQL üretir.
 INSERT, DELETE ve UPDATE SQL Cümlecikleri Üretir.
Ahmet Sedef

5
Partial Pushdown…
 Kaynak Transformasyon SQL üretimi,
SQL üretimi,
 Create view PM_ERETRDS as select id, sum(sallary) from emp group by id;
Ahmet Sedef

6
Partial Pushdown…
 Hedef Transformasyon SQL üretimi,
SQL üretimi,
 Insert into emp as select id, salary from PM_GFG where salary > 1000;
Ahmet Sedef

7
Full Pushdown…
 Source ve Target Aynı Databasede olmalı,
 Eğer Full Pushdown Yapamazsa, Target Side Pushdown yapar.
Ahmet Sedef

8
Nasıl Çalışır…
 ODBC & Native Drivers
 Native Drivers Esnekliği
 Geçici Database Nesneleri Kullanma,
 (Create & Drop)
Ahmet Sedef

9
Yararları…
 Informatica Server Üzerindeki Yükü azaltır.
 Session Öncesi SQL Görüntüler.
 Kolay Hata Ayıklama Sağlar.
Ahmet Sedef

10
Desteklenen Databaseler…
 Oracle, Exadata
 Teradata
 Netezza, DB2
 MS SQL Server
 Sybase
Ahmet Sedef

11
Daha iyi bir Pushdown için...
 Source Qualifier
 Kısa Yolları Kullanma,
 Default Query Options(Join & Filter) Kullanma,
 SQL override yapmaktan kaçınma.
 Expressions
 Gereksiz hesaplamalar yerine Local Variable Kullanma,
 Datatype Conversionlardan Olabildiğince Kaçınma,
 Operatorleri (||,+,/,..) Mümkün Olabildiğince Kullanma,
 Informatica Dışı Komutları Kullanmaktan Kaçınma.
Ahmet Sedef

12
 Filter
 Mappingde Source Qualifier’e Olabildiğince Yakın Yerde Olmalı,
 Birden Çok Filter Kullanmak Yerine Router Kullanılmalıdır.
 Aggregator
 Mappingde Sort Qualifiere Olabildiğince Yakın Yere Sorter
Konulmalıdır,
 Eğer Filter Kullanılıcaksa Agrregator’dan Önce Kullanılmalıdır.
Ahmet Sedef

13
 Joiner
 Source Qualifer’de joinleri Kullanma,
 Outer Joinlerden Kaçınma,
 Lookup
 Expressionda Unconnected Lookup Kullanma (IFF),
 Büyük Lookup Tablolarında Lookup Yerine join Kullanma,
 Mümkünse Tablolarda İndeks Oluşturma,
 Session Cache Calculator Kullanma.
Ahmet Sedef

14
Dikkat Edilmesi Gerekenler..
 Null Sıralaması
 Integration Service ile Database’in öncelik sırası farklı olabilir.
 Değişkenlerde SYSDATE kullanımı
 Integretion Service çalıştırken, Database ise session zamanı
SYSDATE değeri atar.
 Integretion Service ile Database’e farklı timezone
ayarlanmamalıdır.
Ahmet Sedef

15
Dikkat Edilmesi Gerekenler..
 Date Conversion
 Integration Service ile Database’in date formatları farklı olabilir.
 Logging
 Integretion Service her işlem için loglama yapmaz.
 Hatalar üretilen SQL cümlecikleri kullanılarak çözülür.
Ahmet Sedef

16
Uzun Süren Transformasyonlarda Faydası..
 Database Kaynaklarının Çok Fazla Tüketilmesini
Engeller
 Eşzamanlık ve Locks
 Database Nesneleri(Tablo ve View) için Eşzamanlılık Problemi
Olmasını Engeller.
 İşlemler Uzun Sürmediği İçin Deadlockların Oluşmaz.
 Beklenmeyen Durumların Olasılığı Düşer.
Ahmet Sedef

17
Fonksiyonda Kullanırken Püf Noktalar..
 ADD_TO_DATE Fonksiyonu
 Teradata’da Pushdown Yapımını Engeller.
 Oracle İçin LAST_DATE Fonksiyonu
 Saniye kadar Dönüş Yapar, Saniye Sonrasını Trim Yapar.
 LTRIM,RTRIM ve SOUNDEX
 (‘ ‘) Database İçin NULL, Integration Service (‘ ‘) Boşluktur.
 STDDEV ve VARIANCE, DB2’de Farklı Sonuç Üretir.
 SYSDATE ve SYSTIMESTAMP
 Database ve Integration Service İçin Farklı Time Zone Farkı
Ahmet Sedef

18
Slowly Changing Dimensions (Type1 & Type 3)...
 Sadece ORACLE ve DB2’de Çalışır.
 Duplicate Rows
 Source’da Duplicate Rows Olmamalıdır.
 Aynı Satırda Updateler Başarısız Olursa, Deadlock Oluştur.
 Version 8.5 ve Üzeri Olmalıdır.
Ahmet Sedef

19
Limitler..
 Database Bağımlı Çalışır.
 Tablo Partitionları Problem Yaratabiliyor.
 Bazı Fonksiyonlar Beklenmeyen Sonuçlar Üretebiliyor.
 Örnek: Teradata için Tarih bazlı fonksiyonlar
 Her Zaman Performans Sağlamaz.
 Compleks SQL üretmenin sonucu
 Mappingleri Tekrar Tasarlanması Gerekebilir.
Ahmet Sedef

20
Sorular..
Ahmet Sedef

21
Teşekkürler..
Ahmet Sedef

Informatica pushdown optimization eğitimi

Recommended

Recommended

More Related Content

Similar to Informatica pushdown optimization eğitimi

Similar to Informatica pushdown optimization eğitimi (20)

Informatica pushdown optimization eğitimi

Editor's Notes