W dzisiejszych czasach nie tylko ilość danych ale i systemów, procesów oraz narzędzi często wymyka się spod kontroli. Starając się to wszystko usystematyzować, przypisujemy właścicieli dla Data Assetów oraz powołujemy Data Stewardów. Równocześnie musimy pamiętać o udostępnianiu informacji o metadanych, relacjach i definicjach dla analityków, developerów i użytkowników. Bez odpowiednich narzędzi jest to karkołomne zadanie, na szczęście na rynku jest coraz więcej rozwiązań, które nam mogą w tym pomóc. Microsoft, nie pozostając w tyle, rozwija Purview - które weźmiemy dzisiaj na tapetę.
Na tej sesji chciałem przedstawić kilka kluczowych możliwości jakie oferuje nam Data Catalog w Microsoft Purview, między innymi:
- połączenie Databricks Unity Catalog (w szczególności Linage)
- integracja z Azure Data Factory
- Azure SQL i ADLS
Za pomocą praktycznych demonstracji, mam nadzieję zwrócić uwagę na to jak istotne jest odpowiednie zarządzanie swoimi danymi w dużych i średnich organizacjach.