Gdzie znajdziesz Power Query i jak odświeżysz zapytania? 

W Excelu 365 Power Query znajdziesz na karcie Dane pod przyciskiem Pobierz dane. Tuż obok jest przycisk Odśwież wszystko, którym uruchomisz proces aktualizacji. 

Tu znajdziesz informację, gdzie znaleźć PQ w poprzednich wersjach Excela: 
https://www.youtube.com/watch?v=NNgW8fI-Vg8 

W Power BI Desktop przyciski Pobierz dane i Odśwież znajdziesz od razu po uruchomieniu aplikacji na karcie Narzędzia główne. Od września 2025 r. można oprócz pełnego odświeżenia schematu i danych, wybrać tylko schemat lub tylko dane. 

Jak odświeżać zapytania Power Query automatycznie? 

W Excelu nastaw się na aktualizację ręczną. Większość użytkowników, otwiera plik > uruchamia prawy panel Zapytania i połączenia > klika Odśwież wszystko i upewnia się, że proces przebiegł poprawnie, patrząc na wyniki w Excelu i status zapytań. 

We właściwościach zapytania znajdziesz dodatkowe opcje: 

1. Odśwież co… – tu ustawisz automatyczne uruchamianie procesu odświeżania co x minut. Plik musi być otwarty. 
2. Odśwież dane podczas otwierania pliku – nie musisz klikać Odśwież wszystko. 

Istnieją niestandardowe sposoby, aby zautomatyzować odświeżanie bez użytkownika, ale wymagają użycia narzędzi zewnętrznych i skryptów VBA, Power Automate czy Power Shell. 

W Excelu 365 przez przeglądarkę nie da się na ten moment tworzyć zapytań, ale można je odświeżać. Warunkiem jest, aby źródło danych było umieszczone w przestrzeni online (np. na SharePoint/OneDrive). 

W Power BI Desktop wywołanie procesu odświeżenia jest ręczne, ale w Usłudze Power BI (w przeglądarce) można ten proces zautomatyzować na koncie płatnym Pro. Oprócz tego istnieje szereg technik uruchamiania tego procesu inaczej, np. przez Power Automate czy przez API Power BI Service. 

💡Ciekawostka nt. Power Query w usłudze Power BI 

Przepływy danych (ang. Dataflows) są odpowiednikiem Power Query w usłudze Power BI. Służą do stworzenia poprzedzającej warstwy danych danych, która może być wykorzystywana w wielu modelach semantycznych (raportach). Narzędzie ma bardzo podobny interfejs i zasadę działania. Kryje też kilka nowości w porównaniu z wersją stacjonarną w Excelu czy Power BI. 

Więcej o dataflows: https://skuteczneraporty.pl/poznaj-przeplywy-danych-ang-dataflows-czyli-power-query-w-przegladarce/ 

PQ ma też dużo wspólnego z narzędziem Dataflows Gen2 w Microsoft Fabric. 

Lista źródeł danych wspieranych przez Power Query 

W Excelu znajdziesz najważniejsze źródła danych dla użytkownika: pliki, bazy danych SQL, Azure, platformę Power, usługi Online czy innych źródeł. 

Nie wszystkie wersje Excela 365 mają taką samą listę. Przykładowo, tylko w wersji Microsoft 365 dla przedsiębiorstw (ang. Enterprise) znajdziesz connector do folderu SharePoint czy SAP HANA. 

Power BI może się w tym zakresie pochwalić znacznie większym wachlarzem źródeł danych, w szczególności w zakładkach Baza danych, Azure, Usługi online i Inne. 

Co interesujące, w obu narzędziach możemy podłączyć się do Modelu semantycznego usługi Power BI (w Excelu oglądamy go w tabeli przestawnej) i przepływów danych. Model semantyczny można też wczytać na poziomie zapytania, korzystając z łącznika Baza danych usługi SQL Server Analysis Services (w Excelu znajdziesz ją z dopiskiem „import”). Połączenie odbywa się przez XMLA Endpoint i wymaga pojemności Premium (Premium Per User lub Fabric Capacity). 

Jest jednak źródło, które nie istnieje w Power BI, a jest w Excelu? Jakie? 

Tabela lub zakres, które pochodzą z aktualnie otwartego pliku. 

Jak ponownie otworzyć okienko Power Query? 

W Excelu kliknij dwa razy lewym przyciskiem myszy dowolne zapytanie w prawym panelu Zapytania i połączenia. 

Ewentualnie dłuższa droga wiedzie przez Dane > Pobierz dane > Uruchom edytora dodatku Power Query.  

Skrót do PQ możesz dodać do paska narzędzi Szybki dostęp. 

W Power BI Desktop zwykle klikniesz niebieski ołówek z karty Narzędzia główne o nazwie Przekształć dane. 

Możesz też kliknąć prawym przyciskiem myszy na tabeli w prawym panelu Dane > Edytuj zapytania. 

Jak wyłączyć ładowanie niepotrzebnych zapytań Power Query? 

Kolejna różnica między Excelem a Power BI polega na dezaktywacji zapytań, które mają się odświeżać, ale nie mają ładować danych. W Excelu masz 2 opcje: 

• Kliknij prawym przyciskiem w panelu Zapytania i połączenia > Załaduj do… > Utwórz tylko połączenie. 

Pozostałe opcje ładowania omówiłem tu: https://skuteczneraporty.pl/jak-wstawic-tabele-przestawna-bezposrednio-na-zapytaniu-power-query-lekcja-7-w-kursie-pobieranie-danych-w-excelu-dla-finansistow/;

• Usuń arkusz z zapytaniem (polecam ten sposób). 

Z kolei w Power BI Desktop opcję tę znajdziesz w samym Power Query i klikasz ją jeszcze przed załadowaniem danych do modelu danych. W prawym panelu Zapytania kliknij prawym przyciskiem myszy na zapytanie > Odznacz opcję Włącz ładowanie. 

Jak zakończyć zapytanie Power Query? 

Przycisk kończący nasze zapytanie jest w obu narzędziach w tym samym miejscu. W Excelu nazywa się Zamknij i załaduj, podczas gdy w Power BI Zamknij i zastosuj. 

Czy Power Query blokuje aplikację? 

W Excelu tak. Dopóki nie wyjdziesz z PQ, nie możesz podejrzeć aktualnie otwartego pliku i uruchomić innego. 

W Power BI możesz działać jednocześnie na raporcie i w edytorze zapytań. 

💡Ciekawostka Power Query dla Excela 

Jeśli uruchomisz nową instancję Excela (przytrzymaj lewy Alt i kliknij ikonkę Excela na pasku zadań), możesz działać na innych Excelowych plikach podczas pracy w Power Query.  

Gdzie rozpocząć nowe zapytanie w Power Query? 

Przycisk Nowe źródło umieszczono w Excelu na końcu wstążki Narzędzia główne (1). 

Natomiast w Power BI Desktop jest on tuż obok przycisku odświeżania (2). 

W obu narzędziach możesz też kliknąć prawym przyciskiem myszy w panelu Zapytania > Nowe źródło (3). 

💡Ciekawostka nt. przenoszenia zapytań Power Query 

Zapytania (wraz z kodem języka M) możesz przenosić między oknami Excela i Power BI. W jednym narzędziu zaznacz wszystkie zapytania > prawy przycisk myszy > Kopiuj > przejdź do drugiej aplikacji > prawy przycisk myszy > wklej.  

Zapytania możesz przenosić w podobny sposób do Przepływów danych usługi Power BI. 

Czy w Power Query można stosować inne języki programowania? 

Tak, ale tylko w Power BI Desktop. Na końcu karty Przekształć znajdziesz dwa przyciski, których nie ma w Excelu: 

• Uruchom skrypt języka R 

• Uruchom skrypt języka Python 

Dany język i towarzyszący mu serwer muszą być zainstalowane na Twoim komputerze. 

Oto przykład wykorzystania R do eksportu danych z PQ do Excela: 

Jak zdiagnozować i poprawić wydajność zapytania Power Query? 

Kolejna różnica wynika z dodatkowej zakładki w interfejsie, którą znajdziesz tylko w Power BI Desktop. Mowa o karcie Narzędzia. 

Są tu narzędzia służące do optymalizacji działania zapytań. 

W Power BI Desktop jest jeszcze karta Pomoc, ale zawiera głównie szereg linków do stron internetowych. 

Jak Power Query komunikuje błędy w danych zapytania? 

W Excelu spodziewaj się dodatkowych informacji w panelu Zapytania i połączenia – obok liczby wierszy. 

W Power BI Desktop pojawia się czerwona flaga tuż po odświeżeniu. 

Gdzie Power Query działa szybciej? 

W moich wewnętrznych testach zdecydowanie wygrywa Power Query po stronie Power BI Desktop. Wynika to głównie z optymalizacji pamięci RAM i lepszego zarządzania pamięcią podręczną. 

Znasz inne różnice między Power Query w Excelu i Power Query w Power BI? 

Podziel się w komentarzu. 

Webinar „WYSZUKAJ.PIONOWO vs SCALANIE”

Podczas 1-godzinnego spotkania WYSZUKAJ.PIONOWO w Excelu vs Scalanie w Power Query pokazałem, jakie są różnice między wyszukiwaniem w Excelu za pomocą WYSZUKAJ.PIONOWO oraz X.WYSZUKAJ a Scalaniem zapytań w Power Query. Wielu użytkowników Excela, przesiadających się na Power Query, ma z tym problem. Uczestnicy webinaru jako pierwsi dowiedzieli się o:

• premierze kursów online w języku angielskim w Excel BI Academy (w tym 13-godzinnego, bezpłatnego kursu Excel na angielskim interfejsie),
• starcie programu „Polecam kursy”
• promocji na pakiet kursów Akademia 4w1 (w którym jest 5-godzinny moduł o Power Query). Kurs jest dostępny także w języku angielskim na platformie Excel BI Academy jako 4in1 Power courses bundle.

Materiały do Wyzwania Scalania

Tu możesz pobrać zarówno pliki źródłowe wraz z opisem zadań, jak i pliki z rozwiązaniami. Aby przepiąć rozwiązania na swój komputer, wyedytuj źródła danych w Power Query poprzez Ustawienia lub przez krok Źródło.

Rozwiązanie Wzywania Scalanie – wideo

Każde zadanie można ukończyć na kilka sposobów. Oto moja wersja rozwiązań. Jeśli masz inny, ciekawy pomysł, opisz w komentarzu.

Pozwala ona na monitorowanie i sprawdzenie, jakie zapytania są przesyłane do źródła danych. Znajduje się Power Query > Narzędzia.

Jeżeli nie możesz uruchomić Diagnostyki, wybierz wówczas przycisk Opcje diagnostyczne na pasku menu i zaznacz opcję Włącz w edytorze zapytań (nie wymaga uruchomienia jako administrator), co pozwoli Ci nadal w Power Query korzystać z diagnostyki pomimo ograniczeń administracyjnych w Twojej organizacji. Opcja ta jedna nie pozwoli Ci na pełną diagnostykę podczas odświeżania w usłudze Power BI.

Gdy uruchamiasz diagnostykę, Power Query śledzi i sprawdza każdy Twój krok. W zależności od konektora diagnostyka może rozpoczynać się nie tylko od momentu odświeżenia danych czy też pobrania ich po raz pierwszy.

Przycisk Diagnozuj krok, pozwala na sprawdzenie wydajności tylko jednego kroku, wybranego przez Ciebie, co znacznie zawęża ilość otrzymanych danych oraz całą analizę. Najbardziej przyda się w momencie, gdy zechcesz sprawdzić, jakie operacje w zapytaniu dzieją się zdalnie, a jakie lokalnie.

Aby zachować i zebrać dane z analizy o szerszym zakresie (odświeżania, pobierania danych), po wciśnięciu Rozpocznij diagnostykę należy wybrać również Zatrzymaj Diagnostykę. Przyciski te korespondują ze sobą.

Wynik analizy prezentowany jest w dwóch widokach Zagregowanym oraz Szczegółowym, które również można wybrać w opcjach diagnostyki. Wynik zagregowany jest szybką informacją o tym, gdzie i jaki czas jest poświęcony. Wynik szczegółowy jest informacją przydatną dla Power Users do analizy wykonywanych operacji (dla zwykłego użytkownika otrzymane informacje mogą być zbyt szczegółowe) .

Warto też wiedzieć, że operacje, które zostaną zarejestrowane w diagnostyce, nie zawsze wynikają z bezpośredniego działania użytkownika. Czasem mogą być związane z działaniem konektora czy pobieraniem metadanych.

Widok szczegółowy oraz zagregowany

Widok zagregowany jest sumą wielu związanych ze sobą operacji, zaprezentowanych pod zbiorczą pozycją. Oznacza to, że żadne dane w ten sposób nie są tracone, np. czasy trwania są sumowane i prezentowane pod odpowiednią pozycją.

Widok zagregowany ma na celu w łatwy sposób na wysokim poziomie zaprezentować użytkownikowi, co się działo. Jeżeli potrzebne są bardziej szczegółowe informacje dla poszczególnych operacji, wówczas wraz z Group ID można przejść do widoku szczegółowego, by zobaczyć detale.

Wykonywanie wielu ocen

Podczas odświeżania w Edytorze Power Query wiele dzieje się poza widokiem danych. Na przykład, gdy wybierzesz Odśwież podgląd, wówczas ostatni krok każdego zapytania zostanie wykonany, ale w tle w każdym zapytaniu zostaną wykonane wszystkie wcześniejsze kroki, dla których otrzymasz już wówczas wyniki diagnostyki.

Należy również pamiętać, że niesie to ze sobą pewne ryzyko, że nie zawsze otrzymamy poprawne wyniki analizy, ponieważ wykorzystywana jest pamięć podręczna.

Wynik diagnostyki

W odrębnym folderze zapytań Power Query pojawiają się zapytania z zapisanymi wynikami. Wynik posiada wiele kolumn w których znajdują się poniższe informacje:

• ID – dla analizowania wyników jednej diagnostyki ważne jest by filtrować je o wspólnym  Id
• Query – nazwa zapytania dla którego wykonywana była diagnostyka (pochodząca z okna ustawień zapytania)
• Step – nazwa kroku pochodząca z okna ustawień zapytania
• Category – rodzaj operacji
• Data Source Kind – rodzaj źródła danych z którego pozyskiwane są dane : plik, SQL czy Oracle
• Operation – aktualnie wykonywana operacja np. tworzenie połączenia, wysyłanie zapytań do źródła danych
• Start Time – czas rozpoczęcia operacji
• End Time – czas zakończenia operacji
• Exclusive Duration % – wyłączony czas trwania w % dla poszczególnych operacji z tego samego Id
• Exclusive Duration – absolutny czas trwania operacji
• Resource – dokładna nazwa źródła z którego będą pobrane dane np. ścieżka do pliku
• Data Source Query – ilość zapytań wysyłana do źródła danych
• Additional Info – dodatkowe informacje, które nie mieszczą się w pozostałych kolumnach
• Row Count – ilość wierszy wrócona przez źródło danych, kolumna nie jest dostępna we wszystkich konektorach
• Content Length – długość treści zwracana przez zapytania http
• Is User Query – przyjmuje wartości false/true, informuje, czy zapytanie/operacja było wykonane przez użytkownika, czy też jest operacją typu okna Nawigatora
• Path – pokazuje ścieżkę, kolejność wykonywanych operacji na której dana operacja się znajduje
• Group ID – pozwala na przejście i zobaczenie w widoku szczegółowym, operacji które pod tym group id istnieją, ponieważ może być ich kilka

Rejestrowanie diagnostyki

Bardzo ważną informacją jest to, że na otrzymane wyniki w ramach przeprowadzonej analizy wpływa wiele czynników a mianowicie: wykonane transformacje, system na którym pracujesz, opcje konfiguracji sieci czy Power BI, złącze…

Rozpoczęcie diagnostyki, a następnie odświeżenie podglądu, da taki sam efekt jak diagnostyka dla każdego kroku.

Warto też wiedzieć, że przycisk Odśwież podgląd lub Odśwież wszystko nie spowoduje pojawienia się w diagnostyce tylko jednego wiersza Refresh. Spowoduje natomiast wykonanie wszystkich operacji do wykonanie odświeżenia ostatniego kroku zapytania.

Jak już wspomniałem, jest tu haczyk ponieważ, ponieważ nie zawsze pokazywana w diagnostyce pozycja może kosztować np. wskazany czas. Dzieje się tak ponieważ, Power BI może wykorzystywać pamięć podręczną do tego celu. W kolejnych aktualizacjach zespół deweloperów Power BI deklaruje dodanie informacji, czy dane pobierane są z pamięci podręcznej, by usprawnić diagnostykę.

Ponieważ wyniki diagnostyki pojawiają się jako zapytania, mogą one nam posłużyć jako źródło danych dla budowy wizualizacji w Power BI na ich bazie.

Przykład wykorzystania diagnostyki do sprawdzenia Query Folding

Najważniejszym celem diagnostyki zapytań jest sprawdzenie, jakie zapytania zostały wysłane do źródła danych przez Power Query w celu ich pozyskania, co właśnie nazywane jest Query Folding. Jak widać na poniższym screenie, w jednej z kolumn możemy znaleźć zapytania wysyłane w przypadku połączenia się ze źródłem danych, w tym przypadku bazą SQL.

Udało Ci się wykorzystać w praktyce Diagnostykę zapytań Power Query?

Podziel się wrażeniami w komentarzu.

Pobierz narzędzie Excel do sprawdzania numeru konta w wykazie podatników VAT

Istnieje wiele metod wyszukiwania dostępnych w API. Ja zdecydowałem się na tę przydatną dla mnie jako mikro przedsiębiorcy – przed zleceniem przelewu sprawdzam go w wykazie. Plik po sprawdzeniu mogę zapisać, zachowując identyfikator sprawdzenia.

—–> Tu możesz pobrać plik Sprawdź numer konta w wykazie podatników VAT w Excelu <——–

Jeśli nie działa u Ciebie powyższy plik, spróbuj drugi, gdzie parametr data jest pobierany z Power Query.

—-> Tu możesz pobrać plik Sprawdź numer konta w wykazie podatników VAT w Excelu w wersji bez daty <——–

Narzędzie udostępniam bezpłatnie i dołożyłem wszelkich starań, aby działało poprawnie, ale nie daję gwarancji jego działania w przyszłości z racji stałych zmian w API. Pamiętaj, że korzystasz z niego na własne ryzyko. Do poprawnego działania narzędzia potrzebny jest Excel 365, 2016 lub 2019, a w przypadku wersji 2010 lub 2013 potrzebujesz doinstalować Power Query. Narzędzie nie działa we wcześniejszych wersjach Excela. Pamiętaj, że potrzebujesz dostępu do Internetu.

Jak sprawdzić numer konta w wykazie podatników VAT?

Krok 1: Wklej numery kont do tabeli Excel do kolumny A

Tabela automatycznie powinna się rozciągnąć.

Upewnij się, że wkleiły się jako teksty (np. poprzez polecenie Wklej jako wartości), gdyż Excel lub zgubić końcówki długich liczb. Na wszelki wypadek ustawiłem formatowanie kolumny A jako tekstowe.

Krok 2: Wybierz datę

Data ustawiona jest domyślnie jako data aktualna, ale możesz podstawić inną datę. Pamiętaj o formacie RRRR-MM-DD.

Krok 3: Na karcie Dane kliknij polecenie Odśwież wszystko

Polecenie wyśle numery kont do serwisu Ministerstwa Finansów. Przy pierwszym uruchomieniu mogą pojawić się Ustawienia prywatności, które możesz zignorować.

Krok 4:  Sprawdź podsumowanie

Krok 5: Przejrzyj statusy lub filtruj

Krok 6: Zobacz szczegóły w drugiej zakładce

Krok 7: Na wszelki wypadek zapisz kopię pliku do własnego archiwum

Co jeśli numer konta nie zostanie znaleziony?

Proponuję sprawdzić numer na stronie Ministerstwa Finansów ręcznie, aby upewnić się, że go nie ma.

Ograniczenia

W momencie tworzenia narzędzia na stronie dokumentacji API wskazanych było szereg ograniczeń (np. nie więcej niż 10 zapytań dziennie po maksymalnie 30 numerów kont), ale testując narzędzie, na żadne z nich się nie natknąłem, wysyłając kilkanaście razy po 300 zapytań. Istnieje jednak wiele sytuacji, gdy narzędzie nie zadziała prawidłowo lub wygeneruje błąd, co może wynikać z mojego niedopatrzenia, być wynikiem działania API lub wprowadzonych w nim nowości. Jeśli napotkasz problemy, napisz w komentarzu.

Co to jest „biała lista podatników”?

Wykaz podatników VAT, nazywany „białą listą podatników”, jest centralnym, elektronicznym rejestrem podatników VAT. Baza jest prowadzona przez Szefa Krajowej Administracji Skarbowej. Zrobiło się o niej głośno pod koniec 2019 r., gdyż transakcje powyżej 15 tys. zł muszą być realizowane na rachunki widniejące w wykazie podatników VAT w dniu zlecenia przelewu. Jeśli nie, przedsiębiorca nie zaliczy wydatku do kosztów uzyskania przychodów. Dlatego przed wykonaniem przelewu warto sprawdzić, czy numer konta się tam znajduje. Więcej o wykazie i konsekwencjach prawnych przeczytasz na stronie Ministerstwa Finansów.

Jak powstało narzędzie?

Budowa narzędzia wymagała zapoznania się z konstrukcją API oraz zaprojektowania zapytań w Power Query w programie Excel.

Krok 1: Zbuduj 2 tabele i wczytaj je do Power Query

Na początek budujemy 2 tabele z danymi: jedną dla numerów kont, a drugą dla daty sprawdzania.

Krok 2: Stwórz parametr z daty

Metodą wyszczególniania komórek tworzymy parametr Data.

W ten sposób powstaje parametr na liście zapytań.

Krok 3: Zbuduj przykładowe zapytanie do API

Tworzę nowe puste zapytanie do sieci Web i testuję, jak je interpretuje Power Query. Adres internetowy powstał po analizie dokumentacji API na stronie ministerstwa.

Krok 4: Skopiuj kod języka M i stwórz nową kolumnę niestandardową

Kolumna przyjmuje postać:

=Json.Document(Web.Contents("https://wl-api.mf.gov.pl/api/search/bank-account/"&[#"Podaj 26-znakowy numer konta"]&"?date="&Date.ToText(Data,"yyyy-MM-dd")))

gdzie Data to mój parametr z Excela.

Krok 5: Rozpakuj do poszukiwanych kolumn

Mnie interesuje, czy numer konta jest w ogóle na liście. Jeśli numer konta był błędny otrzymamy Error. Jeśli konto jest prawidłowe, możemy rozpakować dodatkowe parametry zapytania.

Po zamianie błędów na null, mogę przejść do rozpakowania.

Następnie tworzę kolumnę warunkową, która potwierdzi, czy numer konta jest czy go nie ma.

Krok 6: Rozdziel zapytania na podsumowanie, statusy i szczegóły

Poprzez odwołanie w Power Query tworzę 3 oddzielne zapytania i buduję z tego narzędzie z formatowaniem warunkowym.

Masz pytania lub uwagi?

Podziel się w komentarzu.

Jednak najpierw odrobina teorii … o macierzach

Macierz to prostokątna tablica zawierająca liczby, symbole i wyrażenia, które ułożone są w wiersze oraz kolumny. Służą do zapisywania dużych zbiorów danych, które są we wzajemnej relacji. Szczególnie ważną rolę pełnią macierze w informatyce oraz statystyce, gdzie często występują ogromne zbiory danych.

Gdzie można wykorzystać macierze?

Są wykorzystywane do rozwiązywania skomplikowanych układów równań liniowych. Bardzo ciekawym jest wykorzystanie do modelowania ekranu komputera, który składa się z pikseli ułożonych w wiersze oraz kolumny.

Macierze wykorzystuje oprogramowanie graficzne takie jak Adobe Photoshop, do przetwarzania transformacji linowych w celu renderowania obrazów.

W fizyce macierze znajdują zastosowanie w badaniach obwodów elektrycznych, mechanice kwantowej i optyce. Macierze wykorzystywane są do dokonywania dokładanych obliczeń pogrzebnych w pracy mechaniki kwantowej.

Macierze wykorzystywane są również do kodowania i szyfrowania wiadomości.

W robotyce i automatyce macierze tworzą podstawowe ruchy robota.

Macierze to również struktury do przechowywania danych śledzenia informacji o użytkownikach, służą do kompresji informacji elektronicznych, czy przechowywania danych biometrycznych, ale także informacji o populacji.

Transformacje macierzy, które dają doskonale skalibrowane obliczenia, wykorzystuje się w sieciach elektronicznych, samolotach, statkach kosmicznych oraz inżynierii chemicznej.

Dla mnie osobiście najbardziej interesującym zastosowaniem macierzy są wyszukiwarki internetowe np. Google. W tym konkretnym przypadku zastosowany jest algorytm PageRank (PR), który wykorzystuje macierze oraz ich wartości i wektory własne. Wyszukiwarka przyporządkowuje stronom internetowym pewien wskaźnik, którego początkiem był PageRank. Im jest o wyższy tym strona wyżej pojawia się w wyszukiwarce. Wartość PR powstaje w oparciu o jakość i ilość linków prowadzących do danej strony www.

Oczywiście nie są to wszystkie zastosowania, ponieważ macierze dotykają wielu dziedzin, a wymienione tu to tylko przykłady.

Na czym polega mnożenie macierzy?

Na mnożeniu wierszy pierwszej macierzy przez kolumny drugiej macierzy. By wymnożyć macierze musi być spełniony warunek : pierwsza macierz ma tyle kolumn ile druga wierszy.

Dlaczego mnożenie macierzy w Power Query?

W Excelu do mnożenia macierzy można wykorzystać wbudowaną funkcję MACIERZ.ILOCZYN, czyli podać zakresy dwóch tablic, które między siebie miałyby być wymnożone. Niestety jeżeli zmienią się wymiary tablic, wówczas formułę należy zaktualizować oraz ponownie przeliczyć przy pomocy Ctrl + Shift + Enter (ponieważ jest to formuła tablicowa).

Jednak operowanie na Power Query pozwala zapomnieć o konieczności aktualizacji działania procedury, gdy zmieni się zakres poszczególnych macierzy.

Mnożenie macierzy w Power Query

Potrzebuję dwóch macierzy A i B jako zdefiniowane zakresy w Excel. Zacznę od pobrania i modyfikacji pierwszej macierzy do Power Query: Dane > Pobieranie i przekształcanie > Z tabeli

Kolejne transformacje tabeli doprowadzą ją do postaci trzykolumnowej: wiersz, kolumna oraz wartość.

Wybieram Dodaj kolumnę > Dodaj kolumnę indeksu > od 1.

Zostanie dodana nowa kolumna z numerem wiersza. Wybieram ją i prawym przyciskiem myszy rozwijam menu podręczne z którego wybieram Anuluj przestawienie innych kolumn.

Operacja ta powoduje przekształcenie macierzy w wyglądu zbliżony do oczekiwanego. Należ jeszcze oczyścić kolumnę Atrybut do form liczbowej.

Kolejne kroki do wykonania to :

1. Zamiana w drugiej kolumnie słowa ColumnX na X : PP myszy > zamień wartości > w polu Wartość do znalezienia wpisuję Column, Zamień na pozostawiam puste
2. Po powyższej operacji kolumna ma format tekstowy, więc zmieniam go na liczbowy : PP myszy > Zmień typ > Liczba całkowita
3. Zmieniam nazw dwóch pierwszych kolumn na: Wiersz, Kolumna co też kończy całą operację zmian na tej tablicy.

Tworzenie funkcji

Na początku zmieniam nazwę zapytania na PrzygotowanieMacierzy. Następnie zmieniam ciąg wykonanych operacji na funkcję. Wchodzę do Edytora zaawansowanego i dodaję w pierwszej linii wyrażenie (TableName) =>

Usuwam cały wiersz „Zmieniono typ” , który jest zbędny (pozostawienie go spowoduje, że funkcja nie będzie uniwersalna, ponieważ zawiera odwołania do nazw poszczególnych kolumn). W kolejnym wierszu #”Zmieniono typ” zmieniam na #”Źródło”(ponieważ wcześniej usunąłem krok Zmieniono typ).

W miejscu deklaracji źródła danych (Excel.CurrentWorkbook) zmieniam nazwę „MacierzA” na TableName > Gotowe. Poniżej widok finalnego polecenia.

Dzięki wykonanym zmianom po prawej stronie, w oknie nawigatora jest widoczna funkcja. Po wybraniu jej z listy pojawia się okno do wprowadzenia parametru dla funkcji (wcześniej wprowadzonego TableName). Wprowadzam nazwę zakresu, który ma być przekształcony w wyniku działania funkcji : MacierzA > Wywołaj.

Dzięki funkcji powstaje nowe zapytanie, zmieniam jego nazwę na MacierzA. Takie same kroki wykonuję dla drugiej macierzy, zmieniam nazwę zapytania na MacierzB.

Tworzenie tabeli połączonej

W następnej kolejności utworzę tabelę połączoną gdzie dla kolejnych kolumn Macierzy A dopasuję wiersze z Macierzy B. Zaznaczam na liście zapytań MacierzA > Narzędzia główne >Połącz > Scal zapytania > Scal zapytania jako nowe.  Z Macierzy A zaznaczam Kolumnę zaś z MacierzyB zaznaczam Wiersz. Jako rodzaj połączenia tabel wybieram Lewe zewnętrze > OK.

W wyniku operacji pojawia się nowa kolumna, której nazwę zmieniam na B.

Klikam a podwójną strzałkę w kolumnie B i z listy wyboru oznaczam Wiersz,  pozostawiam zaznaczoną opcję Użyj oryginalnej nazwy kolumny jako prefiksu (co pozwoli mi później odnaleźć się  w danych).

Powstaje tablica zawierająca wszystkie kombinacje Macierzy A oraz B, które niezbędne są do wymnożenie między siebie macierzy. Znajdują się one w kolumnie Wartość oraz B.Wartość. By wymnożyć macierze musimy wymnożyć między siebie kolumny Wartość oraz B.Wartość.  W tym celu stawiam nową kolumnę Dodaj kolumnę > Kolumna niestandardowa.

Nazywam ją AB oraz wprowadzam formułę wymnożenia kolumn między siebie.

Wynikiem mnożenia macierzy jest macierz o ilości wiersz z Macierz A oraz ilości kolumn z Macierzy B. Zaznaczam kolumnę Wiersz oraz B.Kolumna Przekształć > Grupowanie według

W okna wprowadzam wybory jak powyżej, grupuję dane według numery wierszy oraz kolumn, w nowej kolumnie. Cała operacja powoduje ogromne zmniejszenie się wielkości tabeli.

Dane nie są jednak jeszcze w ostatecznej, oczekiwanej formie. Zaznaczam kolumnę B.Kolumna Przekształć > Dowolna kolumna > Kolumna przestawna

Wskazuję która kolumna jest kolumną z wartościami oraz jaka operacja ma być wykonana na danych,  tym przypadku Suma.

Na koniec powstaje mała macierz o spodziewanych rozmiarach.

Pobierz plik

Jeżeli chcesz sam przejść wszystkie kroki samodzielnie, pobierz plik Mnożenie macierzy w Power Query.

Źródło pomysłu na artykuł

Autor pomysłu: Bill Szysz

https://datachant.com/2016/06/07/faster-matrix-mulitplication/

Czym są ustawienia prywatności danych w Power Query?

Ustawienia prywatności pozwalają na określenie poziomu izolacji jednego źródeł danych od innych. Dzięki temu Power Query zapobiega wyciekaniu danych podczas łączenia danych z różnych źródeł. Istnieje ryzyko, że posiadając w skoroszycie poufne dane, np. numer PESEL, zechcesz połączyć się z danymi z serwera lub źródła internetowego. Twoje dane mogą być przesyłane na serwer w celu wygenerowania zapytania, tym samym możesz nawet nieświadomie przekazać prywatne dane do publicznego źródła.

Aby zapobiegać tego typu przypadkom, firma Microsoft stworzyła ustawienia prywatności danych, które mają za zadanie:

• oddzielić od siebie różnego typu dane,
• zapobiec przesyłaniu czy wyciekaniu danych prywatnych czy organizacyjnych do publicznego źródła.

Poziomy prywatności danych

Rozróżniamy trzy poziomy prywatności danych:

• prywatne – może zawierać poufne dane, które mogą być widoczne jedynie dla autoryzowanych użytkowników, prywatne źródło danych jest całkowicie odizolowane od innych źródeł danych np. skoroszyt zawierający dane pracowników, dane z Facebooka.
• organizacyjne – zwykle dane te są dostępne dla zaufanej grupy użytkowników, dane organizacyjne są odizolowane od danych publicznych jednak widoczne dla innych danych na poziomie organizacyjnym, jako przykład takich danych można podać dokument umieszczony w intranecie SharePoint, udostępniony dla pewnej zaufanej grupy użytkowników. Często to właśnie ten typ danych używany jest jako domyślny przez użytkowników, jednak model prywatności danych nadal działa, co wciąż wpływa na szybkość zapytań.
• publiczne – pozwala na podejrzenie danych przez wszystkich użytkowników znajdujących się w źródle danych; jedynie pliki, internetowe źródła danych, skoroszyty mogą być określone jako dane publiczne. Przykłady danych to źródła udostępnione w Microsoft Azure Martketplace, dane z Wikipedii, lokalny plik z danymi skopiowanymi z publicznej strony internetowej.

Gdzie znaleźć Ustawienia prywatności danych?

Ustawienia prywatności są dostępne z poziomu Power Query i podzielone na globalne oraz bieżące:

• Excel 2016  – Dane > Nowe Zapytanie > Opcje dodatku Query > Opcje zapytania > Prywatność

• Excel 2010/2013  – Power Query > Ustawienia > Opcje > Opcje zapytania > Prywatność

Co oznaczają dostępne opcje?

• Zawsze łącz dane zgodnie z ustawieniami poziomu prywatności dla każdego źródła – jest to ustawienie tylko globalne, więc dla wszystkich skoroszytów, ale również możliwe jedynie dla wybranego skoroszytu.
• Zawsze ignoruj ustawienia poziomu prywatności – całkowicie wyłączy sprawdzanie poziomów prywatności ale jednocześnie przyspieszy pracę.
• Połącz dane zgodnie z ustawieniami poziomu prywatności dla każdego pliku – wybór tej opcji umożliwia wybranie ustawień prywatności w części Bieżący skoroszyt. Przy wyborze innych opcji  ustawień globalnych, ustawienia dla bieżącego skoroszytu z automatu są nadawane  z ustawień globalnych.

Ignoruj poziom prywatności – prosty sposób na przyspieszenie zapytania

W kilku wewnętrznych testach potwierdziło się, że Power Query działa najszybciej, gdy poziom prywatności jest ignorowany. Zatem jeżeli wiesz, że nie musisz się skupiać na poziomach prywatności danych, warto dla ich sprawnego odświeżenia wybrać tę opcję. Dodatkowo możesz także wybrać opcję szybkiego ładowania danych, co także może przyspieszyć ładowanie zapytania.

Zarządzanie poziomem prywatności źródeł danych

W Power Query znajdziesz specjalne miejsce do zarządzania poziomem prywatności z wielu Twoich źródeł: Dane > Pobieranie i Przekształcanie > Nowe zapytanie > Ustawienia źródeł danych. Możemy tam przejrzeć oraz zmienić poziom prywatności dla każdego ze źródeł znajdujących się w skoroszycie.

Dostępne na liście poziomy prywatności to: brak, prywatne, publiczne, organizacyjne.

Dodaj kolumnę z przykładów

Opcja ta znajduje się na pasku Dodaj kolumnę > Ogólne > Kolumna z przykładów. Funkcjonalność ta pozwala na dodanie nowej kolumny i wypełnienie jej przykładowymi wartościami. Na podstawie tych przykładów Excel automatycznie odnajduje i wprowadza niezbędne transformacje. Jest to udogodnienie dla nowych użytkowników, którzy nie wiedzą do końca w jaki sposób wyodrębnić potrzebne im dane z innych kolumn.

Dokładnie została opisana w artykule Kolumna z przykładów – nowość w Power Query dla Excela (Pobieranie i przekształcanie) i Power BI.

Podziel kolumnę według ogranicznika lub liczby znaków na kolumny lub wiersze

Na pasku tę opcję mogę znaleźć Narzędziach głównych > Przekształć > Podziel kolumny > Według ogranicznika / według liczby znaków.

Z listy wyboru wybieram ogranicznik, w moim przypadku jest to średnik. W zależności od tego, którą z opcji w Podziel przy wybiorę (ogranicznik z lewej, prawy czy każde jego wystąpienie), opcje zaawansowane będą aktualizowane. Przy wyborze lewej/prawej stron, nie pojawi się liczba kolumn na które dane będą podzielone. Zaś przy wyborze opcji Każde wystąpienie ogranicznika automatycznie będzie aktualizowana liczba kolumn, w zależności od wybranego typu ogranicznika (którą oczywiście można zmienić na inną).

Wśród opcji dostępny jest również wybór do podziału danych w wierszach lub kolumnach.

Dzielenie kolumny według liczby znaków nie różni się wiele, a może być wykorzystane gdy chcę wydzielić z każdej komórki/wiersza ciąg znaków tej samej długości. Również tu jest kilka opcji do wyboru: wydzielenie ciągu znaków z lewej/prawej lub podzielenie całości na elementy o skazanej długości (tu również automatycznie aktualizowana jest liczba kolumn).

Wydziel tekst przed/po/pomiędzy ogranicznikami

Funkcja ta znajduje się w Przekształć > Kolumna tekstu > Wyodrębnij. Jest to również swego rodzaju uproszczenie, gotowa funkcjonalność dostępna pod przyciskiem. Pozwala na wydzielenie w kolumnie tekstowej , tekstu który znajduje się przed, po lub pomiędzy ogranicznikami.

Wybieram opcję Tekst między ogranicznikami, jako ogranicznik początkowy i końcowy wybieram „;” (średnik). Wybieram wśród opcji zaawansowanych, miejsce wyszukania ogranicznika (od początku / końca) oraz ilość ograniczników , które mają być pominięte, w celu znalezienia tego właściwego.

Wynikiem działania jest kolumna z wydzielonym fragmentem.

Anulowanie przestawienia jedynie zaznaczonych kolumn

Jeszcze do niedawna na karcie Przekształć > Dowolna kolumna > Anuluj przestawienie kolumn > dostępne były dwie opcje:

• Anuluj przestawienie kolumn
• Anuluj przestawienie innych kolumn

Na rozwijanej liście wyboru pojawiła się trzecia opcja Anuluj przestawienie tylko zaznaczonych kolumn

Pozwala na zaznaczenie i odpivotowanie jedynie wybranych kolumn, co przy kolejnym odświeżeniu zapytania (gdyby pojawiły się nowe kolumny) zapewni odpivotowanie jedynie wybranych, a nie wszystkich kolumn znajdujących się w zapytaniu.

Pobierz plik

Pobierz plik Nowe transformacje na kolumnach w PQ i wprowadź własne dane.

Przygotowanie aktualizującej się ścieżki folderu

Pierwszym krokiem będzie przygotowanie zapytania, ze ścieżką do folderu. W tym celu w nowym arkuszu Excel tworzę tabelę z dwiema kolumnami: Parametr oraz Wartość. W pierwszej komórce tabeli wprowadzam nazwę parametru czyli Ścieżka pliku. W komórce obok wprowadzam formułę, która zwróci mi ścieżkę do folderu, w którym znajduje się aktualnie modyfikowany plik Excel.

=LEWY(KOMÓRKA("filename";B1);ZNAJDŹ("[";KOMÓRKA("filename";B1);1)-1)

Funkcja KOMÓRKA zwraca informację o formatowaniu, położeniu czy też zawartości komórki. Dzięki funkcji Szacuj formułę (Formuły > Inspekcja formuł > Szacuj formułę), pokażę jakie są kolejne efekty działania tej formuły.

Argument filename zwraca nazwę pliku wraz z jego ścieżką zapisu.

Następnie funkcja ZNAJDŹ wyszukuje w nazwie pliku nawiasu kwadratowego („[„) , by z całej nazwy która pojawia się pod filename  odseparować jedynie ścieżkę pliku bez jego nazwy (w nawiasie kwadratowym pojawia się nazwa pliku).

Funkcja ZNAJDŹ jako wynik, podaje miejsce nawiasu kwadratowego w ciągu znaków.

A następnie funkcja LEWY z całego ciągu tekstowego, ukrytego pod filename, pobiera jedynie ścieżkę.

Tak utworzoną tabelę ładuję do Power Query jako zapytanie Dane > Pobieranie i przekształcanie > Z tabeli, nadaje mu nazwę Parametr.

Formuła w Power Query

Kolejnym krokiem będzie stworzenie formuły, która z zapytania Parametr pobierze jedynie nazwę ścieżki. W tym celu należy otworzyć nowe zapytanie Power Query: Narzędzia główne > Nowe zapytanie > Nowe źródło > Inne źródła > Puste zapytanie.

W Edytorze zaawansowanym (Widok > Edytor Zaawansowany) wprowadzam poniższą treść. Kod w języku M pozwala na pobranie z zapytania Parametry, ścieżki pliku, która w moim przypadku znajduje się w komórce B2. Zaznaczone na niebiesko fragmenty , to elementy zmienne. Jeżeli swoje zapytanie lub kolumny w pliku nazwiesz inaczej, to również w poniższym poleceniu nazwy te musisz zmienić.

Zmieniam nazwę tego zapytania na fnPobierzParametr.

Pobranie danych z folderu

Następnie pobieram dane z folderu. W tym kroku chodzi o powstanie kodu języka M w Edytorze Zaawansowanym, by w kolejnym kroku zmodyfikować go o wcześniej stworzone parametry (więcej o pobieraniu danych z folderu z parametrem). Wybieram w Edytorze zapytań > Narzędzia główne > Nowe zapytanie > Nowe źródło > Plik > Folder.

Wskazuję folder z którego będą pobrane dane. Następnie przechodzę do Edytora Zaawansowanego (Widok > Edytor zaawansowany) . Poniżej kod jaki został wygenerowany.

Aby faktycznie ścieżka była dynamiczna, dodam zmienną do której przypiszę Ścieżkę pliku (pobraną przez stworzoną przeze mnie funkcję fnPobierzParametr). Poniżej kod jaki finalnie umieszczam w edytorze.

Pojawia się lista z plikami dostępnymi we wskazanym folderze. Należy pamiętać aby odznaczyć z niej plik do którego pobierane są dane oraz jego wersję niezapisaną ( oznaczoną ~$).

Pobierz szablon Excel z zapytaniem Power Query

Pobierz i sprawdź plik Wczytywanie plików z lokalnej ścieżki.

Kolumna z przykładów w Power Query

Funkcja ta pozwala w bardzo szybki sposób stworzenie nowych kolumn w następujących przypadkach:

• gdy wiem jakie dane w kolumnie chcę uzyskać, ale nie wiem jakimi funkcjami oraz jakich przekształceń dokonać
• gdy wiem jakich przekształceń mam dokonać, ale nie wiem gdzie mogę je odnaleźć na wstążce.

Funkcję można znaleźć w Edytorze zapytań > Dodaj kolumnę > Ogólne > Kolumna z przykładów.

Kryją się pod nią dwie możliwości: z wszystkich kolumn, z zaznaczenia (domyślną, bez rozwijania listy wyboru jest Ze wszystkich kolumn).

Po wyborze niezależnie której z opcji, pojawi się okno dodawania kolumny, kolumna o nazwie Kolumna1, w której będę wpisywać przykłady. Następnie Power BI użyje ich do stworzenia reguł i przekształceń pasujących do podanego przykładu. Jednocześnie wykonywane kroki są zapisywane w Edytorze Zapytań, więc zostaną zastosowane do zapytania w zarejestrowanej kolejności.

Aby wpisać pierwszą pozycję do kolumny z przykładów wystarczy dwuklik. W zależności od wybranej opcji Ze wszystkich kolumn lub Z zaznaczenia wyświetlona zostanie wyświetlona lista z opcjami do wyboru (dłuższa – dla wszystkich kolumn, krótsza – z zaznaczenia).

Po wpisaniu przykładu w pierwszej komórce Kolumna1 > Enter w tworzonej kolumnie, zostaną wstawione wartości przewidywane przez Power Query. Zostanie również wyświetlona formuła , która tych przekształceń dokona. Aby zaakceptować transformację wybieram > OK.

Jakie przekształcenia mogą by wykonane podczas tworzenia kolumny z przykładów w Edytorze zapytań?

• Odwołanie do określonej kolumn (jej przycięcie, zmiana wielkości liter itp.)
• Przekształcenia liczbowe (średnia, zliczanie wartości, zliczanie wartości unikatowych, minimum, maximum, mediana, zasilanie itp)
• Przekształcenia tekstu (Text.Start, Text.End, Text.BeforeDelimiter itp.)
• Przekształcenia daty (Date.Day, Date.DayOfWeek, Date.Year itp)
• Przekształcenia czasu (Time.Hour, Time.Minute, Time.Second)
• Data/Godzina przekształcenia (odejmowanie dni i godzin, łączenie daty i godziny itp.)

Opcje zastosowania

Mapowanie wartości w nowej kolumnie

W nowej kolumnie tworzę odpowiedniki dla wartości występujących w oryginalnych kolumnach.

Dla kolumny o nazwie Priorytet zamówienia tworzę nową kolumnę, w której umieszczę odpowiednik literowy dla każdego z priorytetów:

– krytyczny – E

– wysoki – D

– średni – C

– niski – B

– nieokreślony – A

Zaznaczam kolumnę Priorytet zamówienia > Dodaj kolumnę > Kolumna z przykładów > Z zaznaczenia

W pierwszą komórkę nowej  kolumny wpisuję odpowiednią literę, zgodnie z wcześniejszym słownikiem, akceptuję Enterem , wprowadzam literę do kolejnej komórki. Po akceptacji cała kolumna zostaje uzupełniona wprowadzonymi do tej pory wartościami. Na pasku pojawia się również propozycja formuły tworzącej to przekształcenie.

Jak widać w wielu komórkach nowej kolumny, są wciąż nulle, co oznacza że dla nich obecnie stworzona formuła nie działa. Zatem uzupełniam pozostałe komórki, odpowiadające kolejnym typom priorytetu. Całość akceptuję Ctrl + Enter.

Widać (częściowo, bo jest zbyt długa)  już ostateczną formułę dla tego przekształcenia oraz wypełnioną całą nową kolumnę. Dla umieszczenia kolumny w Zapytaniu wybieram OK.

Kolumna warunkowa

Pozwala na dodanie nowej kolumny o niejednolitych zakresach, opartej na kolumnie wejściowej. Stworzę taką kolumnę, na przykładzie Miasta, gdzie będę oddzielał Warszawę od reszty miast. Poniżej widok, jaka została generowana formuła dla nowej kolumny. Prawidłowo!

Uzupełnienie pustych komórek (null)

Zaznaczam kolumny Rodzaj transportu 2-3, w których posiadam nulle, ale wiem, że powinny one tworzyć jedną spójną, pełną wartości kolumnę. Wykonuję kolejne kroki > Dodaj kolumnę > Kolumna z przykładów > Z zaznaczenia. W nowej kolumnie wprowadzam prawidłowe wartości.

W trakcie tworzenia nowej kolumny, trzeba w kilku miejscach wprowadzić prawidłowe wartości, tak aby algorytm Power BI wiedział, że z trzech kolumn będzie powstawała nowa.

Tak wygląda nowo skonstruowana kolumna z trzech innych oraz formuła, która tworzy to przekształcenie.

Tworzenie przedziałów

Wybieram kolumnę Wielkość zamówienia > Dodaj kolumnę > Kolumna z przykładów > Z zaznaczenia. Będę tworzyć przedziały, w pierwszej komórce tworzonej kolumny podaję przykładowy przedział „15 do 25”. Na tej podstawie zostaje uzupełniona cała kolumna, a nawet jej nazwa zmienia się na „Zakres”.

Pobierze dane z folderu w Power Query

Aby połączyć dane z wielu plików w Power BI wybieram Narzędzia główne > Pobierz dane > Więcej > Folder > Połącz > wskazuję lokalizację folderu z plikami do połączenia.

Następnie program sam odczytuje pliki jakie znajdują się w folderze. Edytor daje mi w tym momencie kilka możliwości:

Połącz i załaduj

Polecenie przenosi mnie do okna Połącz pliki , gdzie mogę podejrzeć zawartość łączonych plików (rozwijana lista Przykładowy plik), jednak nie mam możliwości ich edytowania. Jedyną opcją wpływającą na złączone dane jest przycisk na dole Pomiń pliki z błędami.  Następnie po wybraniu OK dane są łączone i ładowane do modelu, widoczne od razu w Power BI. Wybieram również plik który będzie przekładowym, Pierwszy plik to pierwszy plik znajdując się w folderze. Z listy mogę również wybrać inny, który został w tym folderze przez program odnaleziony.

Połącz i edytuj

Jest to opcja bardzo podobna do wcześniejszej. Również pojawia się okno Połącz pliki, z takimi samymi funkcjami jednak, po wyborze przycisku OK przechodzę do edycji łączonych plików, w Edytorze zapytań.

Załaduj

Polecenie powoduje stworzenie modelu, który można modyfikować (w Edytorze zapytań), ale po wyborze przycisku przenosi mnie od razu do widoku raportu w Power BI, a polami do wyboru w tym momencie są parametry techniczne plików pobranych ze wskazanego folderu (data utworzenia pliku, modyfikacji, rozszerzenie, nazwa), więc na niewiele się to zda w naszym przypadku.

Edytuj

W edytorze zapytań mam możliwość wskazania plików które będą łączone oraz jakie kolumny z nich powinny być połączone

Połącz pliki w interfejsie Edytora Zapytań

Analogiczne polecenie mogę znaleźć w samym Edytorze zapytań. Są dwa miejsca, gdzie mogę wybrać opcję połączenia plików:

• Z kolumny z danymi (mały przycisk z dwiema strzałkami w dół)

• Z Narzędzia główne > Połącz > Połącz pliki

Opcja połączenia plików na pasku Narzędzi głównych uaktywni się tylko w przypadku jeżeli zaznaczę kolumnę z danymi (czyli Content) pozostałe kolumny to jedynie informacje techniczne dot. łączonych plików. Przy pomocy filtrów mogę zaznaczyć, które pliki chcę ze sobą finalnie połączyć.

Co się dzieje podczas łączenia danych z folderu w Edytorze zapytań?

Podczas łączenia danych Power Query:

1. Tworzy przykładowe zapytanie, które wykonuje wszystkie wymagane kroki ekstrakcji
2. Tworzy parametr, którym jest przykładowy plik binarny.
3. Tworzy zapytanie funkcyjne, które parametryzuje dane wejściowe pliku do przykładowego zapytania. Zapytanie funkcyjne i przykładowe są ze sobą połączone, tak by zmiany w przykładowym zapytaniu zostały odzwierciedlone w zapytaniu o funkcję (co można sprawdzić na pasku formuły).
4. Stosuje zapytanie funkcyjne do oryginalnego zapytania (z wejściowymi binarnymi), więc stosuje zapytanie funkcyjne dla wejściowych danych binarnych w każdym wierszu i rozszerza wynikową ekstrakcję danych.

Efekt końcowy pobierania danych z folderu

W zapytaniu końcowym widoczne będą dane ze wszystkich plików, zaś w zapytaniu przykładowym – tylko z jednego.

Łączenie plików ze ścieżką jako parametrem

Opisany powyżej sposób jest często wykorzystywany w praktyce, jednak może spowodować, że przy zmianie ścieżki plików wszystkie zapytania pokażą błąd. Co ważne, ścieżka plików pojawia się w naszych zapytaniach 2 razy – raz jako ścieżka folderu, drugi raz jako ścieżka przykładowego pliku. Wykorzystam parametr, aby w Power Query zmieniać tę ścieżkę w jednym miejscu. Parametry opisywałem już w dwóch artykułach:

• Podstawowe zastosowania parametrów w Edytorze zapytań
• Ciekawe przykłady wykorzystania parametrów Power Query

Tworzenie parametru w Power Query

Zacznę od utworzenia parametru , którym będzie ścieżka do łączonych plików. Przechodzę więc do Edytora zapytań Narzędzia główne > Edytuj zapytania > Narzędzia główne Parametry > Zarządzaj parametrami > Nowy parametr.

Dodaję nowy parametr o nazwie Folder, wybieram jako Wymagany, typ Tekst ,  jako wartość bieżącą wprowadzam ścieżkę do folderu z plikami, które chcę połączyć > OK.

Mając parametr, przechodzę do połączenia plików > Narzędzia główne > Nowe źródło > Więcej > Folder > Połącz > z lewej strony okna wybieram opcję Parametr > Ścieżka folderu > OK.

W kolejnym oknie wybieram Edytuj. Zmieniam nazwę zapytania na PołączPliki, a z zaznaczoną kolumną Content wybieram opcję Połącz pliki (na pasku zadań lub wybierając znak dwóch strzałek na kolumnie). By faktycznie zmienić ścieżkę do plików ze statycznej na dynamiczną przechodzę do edytora zaawansowanego (Narzędzia główne > Zapytanie > Edytor zaawansowany). Znajduję zapytanie Przykładowy plik i zmieniam ścieżkę na parametr:

Następnie przechodzę do zapytania głównego i tam także zmieniam ścieżkę pliku na wartość parametru.

W ten sposób mogę łatwo przenosić dane źródłowe w inne miejsce, a do korekty będzie zawsze tylko i wyłącznie parametr. Ta technika ma jeszcze większe możliwości w Excelu, gdyż tam mamy możliwość pobrania ścieżki aktualnie otwartego pliku, o czym wkrótce napiszę na blogu.

Pobierz plik Power BI z zapytaniem w edytorze zapytań

Pobierz i sprawdź plik Połącz pliki.