Poznaj zasady pracy z bazami danych
* Projektowanie baz i tabel
* Wprowadzanie i wybieranie danych
* Konstruowanie złożonych zapytań
Bazy danych są "kręgosłupem" niemal każdej aplikacji. Rozbudowane systemy finansowe, aplikacje korporacyjne, portale i sklepy internetowe, a nawet proste programy do fakturowania opierają się na bazach danych. Rynek systemów zarządzania bazami danych jest bardzo zróżnicowany -- można znaleźć zarówno ogromne aplikacje komercyjne, jak i systemy dostępne nieodpłatnie. Na szczęście dla programistów i użytkowników z każdym z takich systemów można "porozumieć się" za pomocą języka o nazwie SQL. Oczywiście, każda z baz danych ma specyficzne dla siebie instrukcje, jednak rdzeń języka jest wspólny.
Dzięki książce "SQL. Ćwiczenia praktyczne" na podstawie prostych i gotowych do rozwiązania przykładów poznasz podstawy tego języka. Nauczysz się planować i projektować tabele, umieszczać w nich dane oraz przetwarzać je. Dowiesz się, w jaki sposób formułować zapytania języka SQL, za pomocą których można wprowadzać dane, wybierać je według określonych kryteriów i przeprowadzać obliczenia. Poznasz również sposoby pobierania danych z wielu tabel za pomocą złączeń oraz przeczytasz o transakcjach i więzach integralności.
* Zasady projektowania tabel baz danych
* Typy danych
* Wprowadzanie danych do bazy
* Pobieranie danych
* Modyfikowanie i usuwanie danych
* Złączenia
* Transakcje w systemach baz danych
Po przeczytaniu tej książki będziesz w stanie sprawnie posługiwać się
systemami baz danych opartymi na SQL.
Poznaj zasady pracy z bazami danych
* Projektowanie baz i tabel
* Wprowadzanie i wybieranie danych
* Konstruowanie złożonych zapytań
Bazy danych są "kręgosłupem" niemal każdej aplikacji. Rozbudowane systemy finansowe, aplikacje korporacyjne, portale i sklepy internetowe, a nawet proste programy do fakturowania opierają się na bazach danych. Rynek systemów zarządzania bazami danych jest bardzo zróżnicowany -- można znaleźć zarówno ogromne aplikacje komercyjne, jak i systemy dostępne nieodpłatnie. Na szczęście dla programistów i użytkowników z każdym z takich systemów można "porozumieć się" za pomocą języka o nazwie SQL. Oczywiście, każda z baz danych ma specyficzne dla siebie instrukcje, jednak rdzeń języka jest wspólny.
Dzięki książce "SQL. Ćwiczenia praktyczne" na podstawie prostych i gotowych do rozwiązania przykładów poznasz podstawy tego języka. Nauczysz się planować i projektować tabele, umieszczać w nich dane oraz przetwarzać je. Dowiesz się, w jaki sposób formułować zapytania języka SQL, za pomocą których można wprowadzać dane, wybierać je według określonych kryteriów i przeprowadzać obliczenia. Poznasz również sposoby pobierania danych z wielu tabel za pomocą złączeń oraz przeczytasz o transakcjach i więzach integralności.
* Zasady projektowania tabel baz danych
* Typy danych
* Wprowadzanie danych do bazy
* Pobieranie danych
* Modyfikowanie i usuwanie danych
* Złączenia
* Transakcje w systemach baz danych
Po przeczytaniu tej książki będziesz w stanie sprawnie posługiwać się
systemami baz danych opartymi na SQL.
This presentation is mainly about the system we've designed and developed for our internal purposes at work. Its name is: Data Center Physical Infrastructure Manager, DCPIM. This system is a mix of DMS (Document Management System), CMMS (Computerized Maintenance Management System), asset management, monitoring (via SNMP) and some basic DCIM (Data Center Infrastructure Management) features. It’s main purpose is to support our team in the daily tasks related to data center and physical infrastructure management, operations and maintenance. Currently, this system is in use not only by my team, in Poland, but also by our colleagues from the area of Baltic Countries (Lithuania, Latvia, Estonia).
Presented on DatacenterDynamics Converged Warsaw 2012:
http://www.datacenterdynamics.com/pl/conferences/2012/warsaw-2012
Presentation language: Polish
English title (translated): Data center ‘under control’: Data center infrastructure and physical infrastructure management, tools and processes facilitating the data center monitoring function
Maintenance Plans zupełnie znienacka | Każdy z doświadczonych administratorów używa (w jakimś stopniu) czegoś co nazywamy Maintenance Plans – Planami Konserwacji. Podczas tej sesji cciałbym omówić do czego mogą nam się one przydać, jakie funkcjonalności dają, kiedy możemy ich użyć i na co należy zwrócić uwagę. Sesja na poziomie 200 chwilami wybiegająca na 300, z otwarciem na dyskusję.
Jak 5 narzędzi złożyło się na sukces hurtowni
Maciek jest kierownikiem projektu hurtowni danych, Przemek liderem zespołu programistów. Razem zaprezentują jakie (darmowe) narzędzia developerskie usprawniły prace programistom oraz jakie pozytywne „efekty uboczne” przyniosły one zarówno w samym projekcie jak i w jego otoczeniu. Następnie przedstawią jak doprowadziło ich to – szybciej niż myśleli – do automatu, który na bieżąco buduje z najnowszych źródeł, wdraża i testuje hurtownię danych.
Zasilanie hurtowni danych w SSIS w praktyceKamil Nowinski
Temat obejmuje wybrane aspekty zasilania hurtowni danych za pomocą SSIS (SQL Server Integration Services).
I choć na pewno nie omawia wszystkiego to pozwala zwrócić uwagę na kilka istotnych szczegółów mogących
zadecydować o czasochłonności, a więc koszcie, a więc terminowości i w rezultacie sukcesie projektu zasilania hurtowni danych.
Prezentacja po raz pierwszy została przedstawiona na 45. spotkaniu wrocławskiej grupy PLSSUG - 23 października 2014r.
DBPLUS Performance Monitor dla Microsoft SQL ServerDBPLUS
Nowoczesny system do precyzyjnego monitorowania i analizowania wydajności bazy danych. Najważniejsze cechy: Umożliwia sprawne lokalizowanie przyczyn problemów wydajnościowych w bazach danych; Minimalnie obciąża silnik bazy danych podczas zbierania parametrów jej pracy; System nie ma dostępu i nie analizuje danych biznesowych;Regularne aktualizacje i wsparcie producenta zapewniają wsparcie dla najnowszych wersji baz danych; Intuicyjny interface użytkownika i łatwość nawigacji również dla osób bez wiedzy technicznej.
SQL Server 2008 Tips & tricks administracjiSQLExpert.pl
Sesja odbyła się 7 kwietnia 2009r na Wyższej Szkole Komunikacji i Zarządzania w Poznaniu z okazji IT Academic Day.
W ramach tej sesji przedstawiono różne nowości wersji SQL Server 2008 usprawniające pracę administratorom.
Między innymi mowa jest o Policy Based Management, Extended Events, SQL Audit czy też kompresji w SQL Server 2008.
Nowa wersja systemu - upgrade czy re-implementacjaBARTEKWACHNIK
Prezentacja przedstawia zagadnienie związane z i upgrade’em i re-implementacją starszych wersji sytemu Dynamics NAV do najnowszej wersji Microsoft Dynamics 365 Business Central.
Monitoring systemu. Dlaczego mój kardiolog jest bogatym człowiekiem?The Software House
Wojciech Wójcik: W temacie monitorowania systemów IT powiedziano już oceany słów na niezliczonych prezentacjach. Przedstawię wam jednak opowieść o mitologicznym Prometheuszu. Opowieść, która mogłaby konkurować z Grą o tron, a Koronę Królów zjadłaby na przystawkę. W jej trakcie zdradzę wam sekrety monitorowania Kubernetes, ale i nie tylko. Miejcie jednak na uwadze, że nie wszystkie potyczki się wygrywa – dzięki czemu zaszczycę was też możliwością wysłuchania ciekawych historii o fuckupach.
Nowości w zakresie bezpieczeństwa w SQL Server 2016Kamil Nowinski
Przechowywanie wrażliwych danych w bazie często wzbudza wiele wątpliwości. Co w sytuacji kiedy użytkownik uzyska bezpośredni dostęp i będzie mógł wykonać zapytanie zwracające więcej danych niż zobaczyłby w aplikacji?
Spośród zapowiedzianych nowości – SQL Server 2016 przynosi również ulepszenia w obszarze zabezpieczeń, które przedstawimy podczas naszej sesji.
Row Level Security – zabezpieczanie danych na poziomie wierszy to funkcjonalność na którą czeka wielu deweloperów T-SQL. Do tej pory stali oni przed koniecznością ukrywania części danych za pomocą widoków filtrujących źródłowe dane. SQL Server 2016 pozwala na ukrycie części rekordów przed użytkownikiem nawet w sytuacji w której ma on bezpośredni dostęp do tabel.
Chcesz pozwolić użytkownikom odczytywać wszystkie rekordy – ale w przypadku kolumn takich jak numer PESEL czy numer karty kredytowej chcesz aby mogli wyświetlić tylko kilka pierwszych cyfr? Umożliwi to kolejna nowa omawiana funkcjonalność – Dynamic Data Masking.
Prezentacja powstała na potrzeby prezentacji JUG Bielsko-Biała.
Na początku zaczynamy od postawienia sobie pytania dlaczego liquibase jest nam potrzebny i z jakimi problemami spotykamy się na co dzień podczas zarządzania schematem relacyjnej bazy danych.
W kolejnej części prezentacji odpowiadamy sobie na zadane pytania zgłębiając wiedzę o liquibase
Do prezentacji dołączony jest demo: https://github.com/mlubanski/questionnarie-server
More Related Content
Similar to SQLDay 2014 - Change Tracking & Change Data Capture
This presentation is mainly about the system we've designed and developed for our internal purposes at work. Its name is: Data Center Physical Infrastructure Manager, DCPIM. This system is a mix of DMS (Document Management System), CMMS (Computerized Maintenance Management System), asset management, monitoring (via SNMP) and some basic DCIM (Data Center Infrastructure Management) features. It’s main purpose is to support our team in the daily tasks related to data center and physical infrastructure management, operations and maintenance. Currently, this system is in use not only by my team, in Poland, but also by our colleagues from the area of Baltic Countries (Lithuania, Latvia, Estonia).
Presented on DatacenterDynamics Converged Warsaw 2012:
http://www.datacenterdynamics.com/pl/conferences/2012/warsaw-2012
Presentation language: Polish
English title (translated): Data center ‘under control’: Data center infrastructure and physical infrastructure management, tools and processes facilitating the data center monitoring function
Maintenance Plans zupełnie znienacka | Każdy z doświadczonych administratorów używa (w jakimś stopniu) czegoś co nazywamy Maintenance Plans – Planami Konserwacji. Podczas tej sesji cciałbym omówić do czego mogą nam się one przydać, jakie funkcjonalności dają, kiedy możemy ich użyć i na co należy zwrócić uwagę. Sesja na poziomie 200 chwilami wybiegająca na 300, z otwarciem na dyskusję.
Jak 5 narzędzi złożyło się na sukces hurtowni
Maciek jest kierownikiem projektu hurtowni danych, Przemek liderem zespołu programistów. Razem zaprezentują jakie (darmowe) narzędzia developerskie usprawniły prace programistom oraz jakie pozytywne „efekty uboczne” przyniosły one zarówno w samym projekcie jak i w jego otoczeniu. Następnie przedstawią jak doprowadziło ich to – szybciej niż myśleli – do automatu, który na bieżąco buduje z najnowszych źródeł, wdraża i testuje hurtownię danych.
Zasilanie hurtowni danych w SSIS w praktyceKamil Nowinski
Temat obejmuje wybrane aspekty zasilania hurtowni danych za pomocą SSIS (SQL Server Integration Services).
I choć na pewno nie omawia wszystkiego to pozwala zwrócić uwagę na kilka istotnych szczegółów mogących
zadecydować o czasochłonności, a więc koszcie, a więc terminowości i w rezultacie sukcesie projektu zasilania hurtowni danych.
Prezentacja po raz pierwszy została przedstawiona na 45. spotkaniu wrocławskiej grupy PLSSUG - 23 października 2014r.
DBPLUS Performance Monitor dla Microsoft SQL ServerDBPLUS
Nowoczesny system do precyzyjnego monitorowania i analizowania wydajności bazy danych. Najważniejsze cechy: Umożliwia sprawne lokalizowanie przyczyn problemów wydajnościowych w bazach danych; Minimalnie obciąża silnik bazy danych podczas zbierania parametrów jej pracy; System nie ma dostępu i nie analizuje danych biznesowych;Regularne aktualizacje i wsparcie producenta zapewniają wsparcie dla najnowszych wersji baz danych; Intuicyjny interface użytkownika i łatwość nawigacji również dla osób bez wiedzy technicznej.
SQL Server 2008 Tips & tricks administracjiSQLExpert.pl
Sesja odbyła się 7 kwietnia 2009r na Wyższej Szkole Komunikacji i Zarządzania w Poznaniu z okazji IT Academic Day.
W ramach tej sesji przedstawiono różne nowości wersji SQL Server 2008 usprawniające pracę administratorom.
Między innymi mowa jest o Policy Based Management, Extended Events, SQL Audit czy też kompresji w SQL Server 2008.
Nowa wersja systemu - upgrade czy re-implementacjaBARTEKWACHNIK
Prezentacja przedstawia zagadnienie związane z i upgrade’em i re-implementacją starszych wersji sytemu Dynamics NAV do najnowszej wersji Microsoft Dynamics 365 Business Central.
Monitoring systemu. Dlaczego mój kardiolog jest bogatym człowiekiem?The Software House
Wojciech Wójcik: W temacie monitorowania systemów IT powiedziano już oceany słów na niezliczonych prezentacjach. Przedstawię wam jednak opowieść o mitologicznym Prometheuszu. Opowieść, która mogłaby konkurować z Grą o tron, a Koronę Królów zjadłaby na przystawkę. W jej trakcie zdradzę wam sekrety monitorowania Kubernetes, ale i nie tylko. Miejcie jednak na uwadze, że nie wszystkie potyczki się wygrywa – dzięki czemu zaszczycę was też możliwością wysłuchania ciekawych historii o fuckupach.
Nowości w zakresie bezpieczeństwa w SQL Server 2016Kamil Nowinski
Przechowywanie wrażliwych danych w bazie często wzbudza wiele wątpliwości. Co w sytuacji kiedy użytkownik uzyska bezpośredni dostęp i będzie mógł wykonać zapytanie zwracające więcej danych niż zobaczyłby w aplikacji?
Spośród zapowiedzianych nowości – SQL Server 2016 przynosi również ulepszenia w obszarze zabezpieczeń, które przedstawimy podczas naszej sesji.
Row Level Security – zabezpieczanie danych na poziomie wierszy to funkcjonalność na którą czeka wielu deweloperów T-SQL. Do tej pory stali oni przed koniecznością ukrywania części danych za pomocą widoków filtrujących źródłowe dane. SQL Server 2016 pozwala na ukrycie części rekordów przed użytkownikiem nawet w sytuacji w której ma on bezpośredni dostęp do tabel.
Chcesz pozwolić użytkownikom odczytywać wszystkie rekordy – ale w przypadku kolumn takich jak numer PESEL czy numer karty kredytowej chcesz aby mogli wyświetlić tylko kilka pierwszych cyfr? Umożliwi to kolejna nowa omawiana funkcjonalność – Dynamic Data Masking.
Prezentacja powstała na potrzeby prezentacji JUG Bielsko-Biała.
Na początku zaczynamy od postawienia sobie pytania dlaczego liquibase jest nam potrzebny i z jakimi problemami spotykamy się na co dzień podczas zarządzania schematem relacyjnej bazy danych.
W kolejnej części prezentacji odpowiadamy sobie na zadane pytania zgłębiając wiedzę o liquibase
Do prezentacji dołączony jest demo: https://github.com/mlubanski/questionnarie-server
Similar to SQLDay 2014 - Change Tracking & Change Data Capture (20)
2. Szpiedzy z krainy bazy danych,
czyli Change Tracking &
Change Data Capture w służbie SQL Server
Kamil Nowiński
3. PRELEGENT
• Programista od 12-tego roku życia
• Ponad 10-letnie doświadczenie (DEV/DBA)
• Technologie Microsoft:
– Programowanie: VB6, VB.NET, C#, .NET Framework
– Bazy danych: Microsoft SQL 2000 – 2012
Administracja & Programowanie (T-SQL)
• Pasjonat baz danych
• Członek PLSSUG, prelegent wrocławskich spotkań
• Certyfikaty: MCITP, MCP, MCTS, MCSA SQL Server
• Zainteresowania zawodowe:
– Optymalizacja baz danych, Hurtownie danych, SSIS
SQLDay 2014
Kamil
Nowiński
4. AGENDA
• Cel do osiągnięcia
• Ogólna koncepcja CHANGE TRACKING
• Korzyści, Sposób uruchomienia, Ustawienia i uprawnienia
• Funkcje zmian + DEMO
• Ogólna koncepcja CHANGE DATA CAPTURE
• Przebieg CDC, stan CDC
• Komponenty SSIS + DEMO
• Zalety i wady
• Podsumowanie i dyskusja
SQLDay 2014
5. Siedź, Śledź, … - Audytuj
• Cel:
– Wskazanie wierszy, które uległy zmianie/usunięciu od czasu…
• Jak to było wcześniej…
– DML Triggers – bardzo kosztowne operacje (wzrost czasu wykonania)
– Dodatkowe tabele – przechowywanie info o zmianach
– Konieczność czyszczenia dodatkowych tabel
• Wady:
– Czasochłonne (kosztowne) tworzenie wyzwalaczy i tabel dodatkowych
– Spadek wydajności
– Złożone procesy
SQLDay 2014
6. Change Tracking - koncepcja
• Śledzimy zmiany DML (ang. Data Manipulation Language):
INSERT, UPDATE, DELETE
• Poszczególne wiersze wybranej tabeli
• Interesuje nas tylko ostatnia zmiana
– Nie: ile razy wiersz został zmodyfikowany
– Nie: jakie wartości (historyczne)
były przed zmianami
• Zapis synchroniczny
(w transakcji operacyjnej)
• Zapis tylko wartości PK
(Primary Key)
SQLDay 2014
7. Change Tracking - wprowadzenie
• Funkcjonalność wprowadzona w SQL Server 2008
• Poziom kompatybilności >= 90
• Uprawniania:
– SELECT (min. do PK tabeli źródłowej)
– VIEWCHANGETRACKING
• Każda tabela = jedna tablica zmian
• Przechowywanie wartości klucza głównego
• Zmiany dostępne przez tzw. funkcje zmian
SQLDay 2014
8. Change Tracking - uruchamianie
• Uruchomienie mechanizmu:
– Włączenie dla bazy danych
– Ustawienie parametrów
– Włączenie dla wybranej tabeli/tabel
• Narzędzia:
– SSMS
– T-SQL (ALTER DATABASE, ALTER TABLE)
SQLDay 2014
9. Change Tracking – funkcje zmian
• CHANGETABLE()
–CHANGES – lista zmian od czasu X
–VERSION – informacja o wskazanym wierszu
• CHANGE_TRACKING_CURRENT_VERSION()
• CHANGE_TRACKING_MIN_VALID_VERSION(table)
• CHANGE_TRACKING_IS_COLUMN_IN_MASK()
• WITH CHANGE_TRACKING_CONTEXT()
11. Change Tracking
• Zalety:
– Synchroniczny zapis do tabeli zmian,
– Brak konieczności tworzenia własnych wyzwalaczy i dodatkowych tabel,
– Minimalne obciążenie dla silnika bazy danych,
– Prostota działania,
– Minimalna zajętość przestrzeni dyskowej,
– Wbudowane funkcje pobierania zmian w zapytaniach,
– Auto CleanUp,
– Dostępny już od edycji Express (darmowa).
• Wady:
– Synchroniczny zapis do tabeli zmian,
– Informacja tylko o ostatniej zmianie encji (zmiany netto),
– Brak komponentów SSIS (wada?).
SQLDay 2014
12. Change Data Capture
• Koncepcja:
– Śledzimy Przechwytujemy zmiany DML
(ang. Data Manipulation Language):
INSERT, UPDATE, DELETE
– Poszczególne wiersze wybranej tabeli
– Interesuje nas każda zmiana
• Tak: ile razy wiersz został zmodyfikowany
• Tak: jakie wartości (historyczne)
były przed zmianami
SQLDay 2014
13. Change Data Capture
• Transaction Log
• SQL Agent
• Instancja przechwytywania
• max. dwie na tabelę źródłową
• Asynchroniczny zapis:
• co 5 sekund
• max. 10x500 operacji
• Stan CDC
• Zapis LSN (Log Sequence Number)
SQLDay 2014
15. Change Data Capture
SQLDay 2014
Wstępne ładowanie danych
Synchronizowanie zmian przy użyciu CDC
Typy zmian w tabeli źródłowej:
- INSERT
- UPDATE
- DELETE
[Pakiet SSIS] +
odczyt zmiany z
tabeli _CT +
wyrażenie
MERGE
Pakiet SSIS:
Nowe
komponenty
SQL Server 2012
Przebieg CDC (ang. CDC Run) – dwa pakiety SSIS
16. Change Data Capture – Stan CDC
Stan CDC – łańcuch znakowy w formacie:
<state-name>/CD/<cs-lsn>/[CE/<ce-lsn>/][IR/<ir-start>/<ir-
end>/]TS/<timestamp>/ER/<short-error-text>
Przykład:
TFEND/CS/0x000000EA00001F700002/TS/2014-04-15T06:23:44.3314094/
SQLDay 2014
17. Change Data Capture – Łańcuch stanu CDC
SQLDay 2014
Segment Opis
<state-name> Nazwa bieżącego stanu CDC
(np. ILSTART, ILEND, ILUPDATE, TFEND, TFSTART, TFREDO, ERROR)
CS Current Start - Aktualny punkt początkowy przetwarzania
<cs-lsn> Ostatni LSN przetworzony w poprzednim przebiegu CDC
CE Current End – Bieżący punkt końcowy przetwarzania
<ce-lsn> Ostatni LSN, który ma być przetworzony w bieżącym przebiegu CDC
IR Początkowy zakres przetwarzania
<ir-start> LSN zmiany bezpośrednio przed rozpoczęciem wstępnego ładowania
<ir-end> LSN zmiany bezpośrednio po zakończeniu wstępnego ładowania
TS Sygnatura czasowa ostatniej aktualizacji CDC
<timestamp> Dziesiętna reprezentacja 64-bitowej właściwości System.DateTime.UtcNow
ER Łańcuch stanu, jeśli ostatnia operacja CDC zakończyła się niepowodzeniem
<short-error-text> Zawiera krótki opis błędu jeśli takowy wystąpił
18. Change Data Capture – Typy stanów CDC
SQLDay 2014
Stan Opis
0 – (INITIAL) Stan początkowy przed uruchomieniem jakiegokolwiek pakietu w bieżącej grupie CDC.
ILSTART
Initial Load Started
Stan występuje podczas wstępnego ładowania danych.
ILEND
Initial Load Ended
Stan występuje po udanym zakończeniu wstępnego ładowania.
ILUPDATE
Initial Load Update
Stan występuje przy przetwarzaniu wstępnego zakresu zmian CDC.
(pierwszy przebieg po wstępnym ładowaniu danych)
TFEND
(CDC change processing
Update Ended)
Stan kontekstu CDC, gdy poprzedni przebieg CDC zakończył się powodzeniem.
Gotowość do przetwarzania kolejnego zakresu zmian.
TFSTART
(CDC change processing
Ended)
Stan kontekstu CDC gdy zakończyło się przetwarzanie wstępnego zakresu zmian.
Oznacza to albo zwykły przebieg CDC, który jeszcze się nie zakończył,
albo przebieg CDC zakończony błędem.
TFREDO (Reprocessing
Trickle-Feed Updates)
Stan jest używany, gdy poprzedni przebieg nie został czysto zakończony i jest właśnie
powtarzany.
ERROR Grupa CDC znajduje się w stanie błędu.
19. Change Data Capture
Kiedy można nie przechowywać stanu CDC:
- Wstępne ładowanie / jednorazowe przetworzenie
- Nie planujemy kolejnych zasileń z tej tabeli
Kiedy należy przechowywać stan CDC:
- Przetwarzamy zmiany z tabeli źródłowej w sposób ciągły
(cykliczne zasilenia, synchronizacje)
SQLDay 2014
20. Change Data Capture – cdc_states table
CREATE TABLE [dbo].[cdc_states](
[name] [nvarchar](100) NOT NULL,
[state] [nvarchar](256) NOT NULL
) ON [PRIMARY]
GO
ALTER TABLE [dbo].[cdc_states] ADD CONSTRAINT [PK_cdc_states] PRIMARY KEY CLUSTERED
(
[name] ASC
) WITH (PAD_INDEX = OFF) ON [PRIMARY]
GO
SQLDay 2014
21. Change Data Capture
Komponenty CDC w SSIS 2012:
• Control Flow:
– CDC Control Task Editor
• Data Flow:
– CDC Source
– CDC Splitter
SQLDay 2014
22. CDC Control Task Editor
CDC control operation:
- Mark initial load start
- Mark initial load end
- Mark CDC start
- Get processing range
- Mark processed range
SQLDay 2014
23. CDC Source
CDC Processing Mode:
- All
- All with old values
- Net
- Net with update mask
- Net with merge
SQLDay 2014
26. Change Data Capture
• Zalety:
– Asynchroniczny zapis do tabeli zmian,
– Automatyczne utworzenie Job-ów i wielu SP obsługujących mechanizm,
– Gotowe komponenty SSIS (2012),
– Łatwość budowy procesów synchronizacji,
– Wbudowane funkcje pobierania zmian z tabeli zmian (*_CT),
– Możliwość podglądu danych wprost z tabeli zmian (*_CT).
• Wady:
– Zwiększone zużycie zasobów dyskowych,
– Wielokrotne duplikowanie tych samych encji,
– Enterprise Edition.
SQLDay 2014
27. PODSUMOWANIE
Change Tracking Change Data Capture
Tracked DML Changes
Rodzaj operacji DML
Czy kolumna została zmieniona
Zapis informacji
Natychmiast
(Synchroniczny)
Opóźniony
(Asynchroniczny via SQL Agent)
Dane historyczne
Lokalizacja docelowa
Tabela wewnętrzna
(INTERNAL)
Transaction Log
+ Tabela systemowa *_CT
Zajętość zasobów dyskowych Niewiele Znacząca
Komponenty SSIS
Edycja Wszystkie (w tym Express) Enterprise
SQLDay 2014