„Mikołajkowy konkurs 2w1” po #25 Data Viz & BI Meetup

Aby zachęcić uczestników meetupu oraz wszystkich innych analityków (i oczywiście czytelników SkuteczneRaporty.pl i skuteczneraporty.pl/) do wykorzystania wiedzy z ostatniego spotkania, ogłaszam „Mikołajkowy konkurs 2w1” na:

• najlepszą mapę w Power BI
• najlepszą animowaną wizualizację w Power BI

Aby wziąć udział w konkursie:

1. Wybierz dowolne dane źródłowe. Bądź kontrowersyjny, opowiedz historię, odkryj nieodkryte.
2. Zbuduj dokładnie 1 stronę raportu w Power BI o dowolnych wymiarach, która będzie zawierać mapę lub animowaną wizualizację. Możesz wziąć udział w dwóch kategoriach, podsyłając pracę w obu tematach.
3. Odeślij plik .pbix (i jeśli złożyłeś animację w film, także plik wideo lub link do filmu) na adres kontakt@skuteczneraporty.pl najpóźniej do 6.12.2019 r. do końca dnia.
4. Poczekaj na ogłoszenie wyników, które odbędzie się na blogu skuteczneraporty.pl/ najpóźniej do 13.12.2019 r.

Nagroda w konkursie

Nagrodą w konkursie są 2 pakiety kursów Akademia 4w1 o wartości 1230 zł brutto każdy. Nagroda zostanie wręczona w 2 kategoriach: mapa oraz wizualizacja animowana. Dostęp do kursów zostanie nadany w dniu ogłoszenia wyników na adres mailowy zwycięzcy. W skład pakietu wchodzą kursy:

• Power Query dla analityków Excel i Power BI
• Model danych i język DAX dla użytkowników Excel Power Pivot i Power BI
• Wizualizacja danych i projektowanie dashboardów Excel
• Power BI Desktop

Regulamin konkursu

Pełna treść regulaminu konkursu znajduje się na dole strony.

Materiały po #25 Data Viz & BI Meetup

Mapy w Power BI

Paulina Sanak przygotowała porównanie różnych opcji w Power BI związanych z mapami.

Następnie uczestnicy meetupu mogli samodzielnie stworzyć mapy i porównać ich działanie. Wystąpienie zostało świetnie przyjęte przez publiczność i będzie miało swoją kontynuację w przyszłości jako „Mapy w Power BI cz. 2”.

Tu możesz pobrać prezentację Pauliny oraz plik Power BI, który tworzyliśmy.

Jak ożywić dane?

Temat ożywiania danych jest ostatnio bardzo na czasie. Dlatego w kolejnej prelekcji opowiedziałem:

• Skąd w Power BI ruchomy wykres bąbelkowy?
• Jak go zbudować w Power BI?
• Jakie są inne sposoby animowania wykresów, np. poprzez:
  • Enlighten aquarium
  • Animated bar chart race
  • Play axis
  • Word cloud
  • Impact Bubble
  • Scroller
  • Walkers Animated Pictogramm
  • Enlighten Stuck Shuffle

Oto przykład jednej z wizualizacji:

Wszystkie ruchome wykresy możesz zobaczyć w załączonym pliku: Animacje w Power BI.

Regulamin „Mikołajkowego konkursu 2w1”

1. Organizatorem konkursu jest SkuteczneRaporty.pl Bartosz Czapiewski z siedzibą w Warszawie przy ul. św. Wincentego 128C/4, 03-291 Warszawa, NIP 5941476016. Organizator jest jednocześnie przyrzekającym nagrody.
2. Konkurs skierowany jest do wszystkich osób pełnoletnich.
3. Praca konkursowa może zostać przygotowana na dowolnych danych.
4. Jedna osoba może przesłać wiele projektów na każdą kategorię oraz wygrać w dwóch kategoriach.
5. Projekty muszą być przygotowane indywidualnie (nie ma możliwości zgłaszania prac zbiorowych).
6. Projekt musi zostać dostarczony jako plik Power BI (rozszerzenie .pbix). Dodatkowo można przesłać gotowy film w postaci pliku wideo lub linku do niego (dotyczy projektu animacji).
7. Kryteria oceny projektów (łączny wynik maksymalny to 30 punktów):
   • storytelling (umiejętność opowiedzenia historii z użyciem danych) (0-10 punktów)
   • wygląd i interaktywność (0-10 punktów)
   • poprawność merytoryczna i zgodność ze sztuką wizualizacji danych (0-10 punktów)
8. Komisja oceniająca nadesłane praca będzie składać z trzech osób: 1 z ramienia SkuteczneRaporty.pl, 1 z ramienia SKN Statystyki SGH i 1 z ramienia Data Viz & BI Meetup.
9. Konkurs trwa od 21.11.2019 do 6.12.2019. Prace muszą zostać dostarczone najpóźniej do 6.12.2019 do godziny 23:59. Prace nadesłane po terminie nie będą brały udziału w konkursie.
10. Rozstrzygnięcie konkursu odbędzie się do 13.12.2019 r. poprzez blog skuteczneraporty.pl/. Wręczanie nagród – poprzez nadanie dostępu do kursów – nastąpi w tym samym dniu.
11. Jeśli w obu kategoriach zwycięży ta sama osoba, może ona wskazać drugi adres e-mail, dla którego zostanie nadany dostęp.
12. Biorąc udział w konkursie uczestnik wyraża zgodę na przetwarzanie danych osobowych (imię, nazwisko, e-mail) przez SkuteczneRaporty.pl na potrzeby konkursu zgodnie z RODO. Administratorem danych jest Bartosz Czapiewski (kontakt@skuteczneraporty.pl). Zgoda może zostać cofnięta w dowolnym momencie przez wysłanie wiadomości e-mail spod adresu, którego zgoda dotyczy. Uczestnicy nie są profilowani. Dane nie będą przekazywane poza EOG ani udostępniane organizacjom międzynarodowym.
13. Biorąc udział w konkursie uczestnik zgadza się na opublikowanie pracy na blogach SkuteczneRaporty.pl i skuteczneraporty.pl/ oraz w mediach społecznościowych.
14. Konkurs prowadzony jest wyłącznie w oparciu o niniejszy Regulamin i powszechnie obowiązujące przepisy prawa, w szczególności przepisy art. 919 – 921 ustawy z dnia 23 kwietnia 1964 roku Kodeks cywilny (tekst jedn. Dz. U. z 2014 roku poz. 121 z późn. zm.), zwanej dalej „k. c.”.

1. Szukaj tekstu we fragmentatorze (filtrze typu slicer)

Jak wybrać na fragmentatorze ten 1 produkt z tysiąca? Opisywałem już fragmentator niestandardowy Text Filter, który pozwala zastosować wyszukiwanie typu „zawiera”. Ale jeśli szukamy tego pojedynczego produktu z listy, zwykły fragmentator pozwala aktywować okienko wyszukiwania, które ogranicza listę do wpisanego tekstu.

2. Wyszukaj klastry

Potrzebujesz na szybko dokonać segmentacji klientów na 4 grupy? Wyszukaj klastry! Polecenie jest dostępne pod trzema kropkami dla Wykresu punktowego i wizualizacji Tabela, w której podać możemy od 1 do 15 miar.

W tym automacie możemy wskazać oczekiwaną liczbę klastrów (lub pozostawić domyślną opcję auto) oraz określić, na jakich miarach ma zadziałać algorytm klastrowania. Efekt operacji jest polem typu Grupa, które ląduje na liście pól w Power BI.

3. Pobierz dane do pliku CSV

Chcesz pobrać dane z wykresu? Kliknij trzykropek, aby utworzyć plik CSV. Operację tę sprytnie możemy wykorzystać, umieszczając na raporcie tabelę analogiczną do źródłowej tabeli transakcyjnej, która działa jak polecenie Pokaż rekordy.

Dane zapisywane są do pliku CSV, który pomieści maksymalnie 30 000 wierszy i jest zapisany z separatorem jako przecinek z datami i liczbami dziesiętnymi w zapisie amerykańskim. Do jego wczytania polecam od razu użyć Power Query.

4. Sortuj wykres

Pod trzema kropkami znajdziemy poprawiony niedawno mechanizm sortowania, w którym najpierw wskazujemy pole, a później kierunek.

5. Włącz wyróżnienie wykresu (Spotlight, czyli światło sceniczne)

Chcesz wyróżnić na zakładce pojedynczy wykres na dashboardzie? Włącz dla niego opcję Spotlight, a następnie dodaj zakładkę.

6. Edytuj mapę ArcGIS

Ta mapa wyrasta na wyróżnik Power BI, pozwalając na pokazanie naraz aż do 30 000 punktów (dla konturów jest to 15 000 punktów). W niedawnej aktualizacji poprawiono też jej szybkość o 50%. Jej edycja oczywiście za pomocą trzech kropek. Tu znajdziesz więcej informacji o mapie ArcGIS dla Power BI.

W Power BI mamy do wyboru kilka wizualizacji danych przestrzennych:

• Mapa (czyli wykres bąbelkowy na podkładzie mapowym – kartodiagram);
• Kartogram,
• Mapa kształtów,
• Mapy ArcGIS dla usługi Power BI,
• Niestandardowe wizualizacje (Mapbox, Drilldown Choropleth, Route Map, Flow Map, mapy generowane skryptem R i inne).

Gdzie znaleźć ArcGIS Map dla Power BI?

Komponent ArcGIS for Power BI dostarczany jest przez firmę Esri, w związku z czym korzystanie z tego komponentu objęte jest dodatkowymi warunkami, na które użytkownicy Power BI muszą wyrazić zgodę (w oknie dialogowym).

Tworzenie wizualizacji przy pomocy mapy ArcGIS

Aby przedstawić dane na mapie, wśród dostępnych pól w danych źródłowych musi znajdować się wymiar geograficzny. Dla prezentacji rozwiązań narzędzia wykorzystam dane dotyczące trzęsień ziemi.

Z dostępnych wizualizacji wybieram ArcGIS Map, w Szerokości geograficznej umieszczam pole Lat, w Długości geograficznej pole Lon, zaś jako rozmiar Magnitude (średnia). Dzięki temu otrzymuję mapę z punktami wystąpień trzęsień ziemi i ich średnią siłą w danym punkcie.

Punkty mają bardzo zbliżone wielkości, a mapa sama w sobie jest mało interesująca, dlatego warto przyjrzeć się dodatkowym opcjom. Kryją się one w prawym górnym rogu wizualizacji, pod przyciskiem wielokropka > Edytuj.

Po wyborze nad wizualizacją pojawia się pasek z całym dodatkowym wachlarzem możliwości.

By wrócić do widoku raportu należy wybrać przycisk Wróć do raportu w lewym górnym rogu, nad wizualizacją.

Opcje edycji Map ArcGIS

Mapa bazowa

Dostępne są cztery rodzaje: ciemne, szare płótno, jasnoszare płótno, OpenStreetMap oraz Ulice (czyli mapa podstawowa ArcGIS). Są to kolorystyki map, na których wizualizowane będą dane.

Typ lokalizacji

Umożliwia wybór prezentacji lokalizacji jako punkty lub jako granicy. Prz tej drugiej opcji definiujemy jeszcze, z jaką kategorią danych mamy do czynienia: kraje, prowincje, kody pocztowe itd. Niestety geokodowanie może nie wykryć wszystkich obszarów czy granic.

Motyw mapy

Dostępne są cztery motywy map. Lokalizacja i Rozmiar dobierane są automatycznie na podstawie pól powiązanych z daną lokalizacją oraz dodanych do zasobnika Rozmiar.

• Tylko lokalizacja ­– nakreślenie punktów danych lub wypełnionych granic na podstawie ustawień w opcji Typ lokalizacji
• Heat Map (Mapa cieplna/skupień) – nakreślenie na mapie intensywności danych
• Rozmiar – nakreślenie punktów na mapie, których wielkość odpowiada wartości w zasobniku rozmiaru
• Klastrowanie – nakreślenie / podsumowanie ilości punktów danych regionie na mapie

Styl symboli

Działają w zależności od tego jaki motyw mapy zostanie wybrany, wówczas dostępne są tu różne opcje edycji wybranego motywu np. skale kolorów, przezroczystość, kształt, rozmiar symbolu itd.

Pinezki

Zupełnie jak w usługach Google możemy zwracać uwagę na istotne punkty oznaczone przy pomocy pinezek. Można ustawić ich maksymalnie 10. Poprzez wyszukiwarkę można odnaleźć interesujący punkt. Zostanie on później zapisany na karcie Pinezek, a zaznaczonym punktom możesz zmienić kolory.

Czas dojazdu

Pozwala na wybranie danej lokalizacji (w postaci pinezki) i określenie na mapie, jakie lokalizacje znajdują się w określonej odległości lub określonym czasie dojazdu.

Przy pomocy jednokrotnego lub wielokrotnego wyboru (z przyciskiem Ctrl) wybieram lokalizację, a następnie decyduję, czy chcę zobaczyć punkty w określonej odległości czy też czasie dojazdu (od 1 do 30 min). Domyślnie promień od wybranego punktu oznaczony jest kolorem fioletowym jak na rysunku. Oczywiście można zmienić te ustawienia.

Ważną funkcją jest tu możliwość zaznaczenia strefy dojazdu poprzez wybór odpowiedniego zaznaczenia. Dzięki temu wiemy, ile punktów znajduje się w środku strefy.

Warstwa referencyjna

Dane demograficzne

ArcGIS Maps for Power BI oferuje różne warstwy danych demograficznych, które pozwalają na zaprezentowanie danych ze źródła na tle danych demograficznych dot. ludności danego obszaru. W części Demografia do wyboru jest kilka warstw, poprzez zaznaczenie pola wyboru przy niej, zostanie wykorzystana na mapie.

Dodatkowo, po nałożeniu na mapę warstwy referencyjnej, jest ona interaktywna. Co oznacza że wybierając na mapie punkty czy obszary, w etykietce pojawia się podpowiedź dotycząca danego wycinka zależna od wybranej warstwy. Niestety wbudowane warstwy są tylko dla USA.

Warstwa ArcGIS

To wyszukiwarka map internetowych, które są udostępniane publicznie przez różne organizacje oraz zestaw wybranych map z witryny Living Atlas. Z tego miejsca można wyszukiwać, wybierać i dodawać dostępne mapy jako warstwę referencyjną.

Na poniższym przykładzie wśród dostępnych map wyszukałem mapy dotyczące huraganów. W ten sposób powstała ciekawa mapa Ameryki Środkowej z nałożeniem na siebie miejsc wstępowania huraganów oraz trzęsień ziemi (w postaci linii).

Infografiki

To świetna funkcja, która do wizualizacji dodaje również kontekstualną (zmieniającą się od zaznaczonych/widocznych danych) informację, z bardzo szerokiego zakresu (np. populacji, wieku czy dochodu). Niestety dane w infografice (ze względu na podstawowe usługi ArcGIS) dotyczą jedynie Stanów Zjednoczonych.

Wybieranie punktów na mapie

W ArcGIS Maps istnieją trzy tryby wybierania danych:

1. Wybieranie poszczególnych punktów danych.
2. Zaznaczenie na mapie przy pomocy prostokąta, wszystkich punktów które w jego obszarze się znajdą.
3. Pozwala na wybranie granic lub wielokątów w ramach warstwy referencyjnej i wybrania zawartych w nich punktów danych.

Należy pamiętać że jednocześnie można zaznaczyć jedynie 250 punktów danych. Jeśli z tą opcją działałoby grupowanie danych, wiele analiz byłoby prostszych. Niestety na ten moment nie jest to wspierane.

ArcGIS Pro

Istnieje możliwość wykupienia dostępu ArcGis Pro dla indywidualnego użytkownika jest to koszt $5 miesięcznie. Poniżej tabela ze strony Esri dotycząca opłat w zależności od liczby użytkowników Pro.

W porównaniu do wersji Basic, czyli dostępnej za darmo w Power BI, subskrypcja Plus pozwala na:

• dostęp do danych demograficznych na całym świecie (Basic – tylko dane dla USA)
• dostęp do danych zweryfikowanych, gotowych do użycia pochodzących ze źródeł  autoryzowanych (nie tylko publicznych)
• szerszy dostęp do map i lokalizacji
• dostęp do tych samych motywów map  (mapy ciepła, czasy napędów)
• szerszy dostęp do map bazowych (wersja podstawowa jedynie 4)

Wady i zalety mapy ArcGIS dla Power BI

Zalety

• ciekawe narzędzia analityczna – mapa cieplna, klastrowanie, mapa dojazdu
• właściwe skalowanie wielkości punktów
• możliwość wyświetlenia większej liczby punktów niż w standardowej wizualizacja Mapa w Power BI
• automatyczne geokodowanie
• możliwość wczytania własnych współrzędnych
• wybieranie punktów na mapie
• przy braku geokodowania pojawia się ostrzeżenie

Wady

• automatyczne geokodowanie może być niedokładne
• wersja bezpłatna ograniczona do podstawowych funkcji i wbudowanych danych (dodatkowe warstwy i infografiki)
• brak wsparcia dla hierarchii (na półce Location możemy umieścić tylko 1 pole)
• kontury dla Polski nie działają dla powiatów, gmin, kodów pocztowych