Gdy transformacja Podziel kolumny w Power Query nie wystarcza

Na blogu opisywałem już jedną z nowości w Power Query – Podziel kolumny według przejścia.

Są jednak sytuacje, gdy nie chcemy rozdzielać tekstu, a jedynie oczyścić go z niepotrzebnych znaków czy symboli. I nie chodzi tu o operacje takie jak Przycięcie (usuwa spacje) czy Wyczyść (usuwa znaki niedrukowalne).

Text.Select – wyodrębniacz znaków z kolumny w Power Query

Z pomocą przychodzi nam funkcja języka M, którą wstawimy poprzez kartę Dodaj kolumnę > Kolumna niestandardowa. Następnie wpisujemy:

=Text.Select([Tekst],{"a".."z"})

Pierwszym argumentem jest kolumna tekstowa, drugim lista znaków, które chcemy wyodrębnić. Żeby nie wpisywać wszystkich liter alfabetu, możemy się posłużyć wbudowaną w Power Query listą od A do Z, reprezentowaną przez {„a”..”z”}. Efektem końcowym jest kolumna z tekstem.

Na liście nie ma jednak polskich znaków, dlatego w naszym scenariuszu je dopiszemy.

=Text.Select([Tekst],{"a".."z","ą","ć","ę","ł","ń","ó","ś","ź","ż"})

Jak wyodrębnić duże litery w Power Query?

Analogicznie możemy zająć się tylko dużymi literami, tworząc listę liter od A do Z (dużą literą).

=Text.Select([Tekst],{"A".."Z"})

Jak wyodrębnić cyfry w Power Query?

Taką samą listę znaków możemy zastosować do wygenerowania listy cyfr, dzięki czemu wytniemy je wszystkie z tekstu.

=Text.Select([Tekst],{"0".."9"})

Jak wyodrębnić inne znaki w Power Query?

Jeśli Twój tekst zawiera różne symbole, możesz się ich pozbyć w analogiczny sposób, tworząc listę znaków do wyodrębnienia, np. – % # (.

=Text.Select([Tekst],{"-","%","#","("})

Jak usunąć znaki specjalne w Power Query?

Najczęściej zależy nam jednak na operacji przeciwnej. Przyda się wtedy druga funkcja języka M – Text.Remove. Jej składnia jest taka sama, jednak zamiast wyodrębniać wskazany tekst, funkcja usuwa go z niego. Jeśli jednak zapomnimy o jakimś znaku (np. $), wówczas pozostanie on w tekście.

=Text.Remove([Tekst],{"-","%","#","("})

Jest na to jednak sposób. Otóż Power Query przy tworzeniu list typu {„a”..”z”} bazuje na liście znaków standardu Unicode. Zamiast więc tworzyć listę znaków specjalnych, możemy ją w skrócie zapisać jako:

=Text.Remove( [Tekst], {" ".."/",":".."@", "[".."`","{".."~"} )

Pobierz plik Excel z zapytaniem Power Query

Tu możesz pobrać plik Excel ze wszystkimi kolumnami utworzonymi z funkcjami Text.Select i Text.Remove w języku M.

Co się zmieniło w Excel Power Query?

Jeśli posiadasz zaktualizowaną wersję Excela 365, zobaczysz następujące zmiany:

Kolorowy pasek formuły i edytor zaawansowany

Podpowiedzi w pisaniu formuł i sprawdzaniu poprawności

Scalanie rozmyte

Tu opisywałem scalanie rozmyte szczegółowo.

Zmiany te nie objęły Excela 2016. Na razie nie widać jeszcze elementów związanych z zarządzaniem jakością kolumn.

Przykład polecenia Podziel kolumny według pozycji

W Power Query funkcjonuje już polecenie Wyodrębnij > Zakres. Niestety wykonuje ono tylko 1 operację – w przeciwieństwie do linijki, którą możemy znaleźć w Excelu.

Jeśli chcemy wykonać podział w 1 operacji, możemy po przecinku podać kilka miejsc rozdzielenia, pamiętając że liczymy od 0.

Inny przykładowy scenariusz to próba zamiany jednej kolumny na kilka wierszy, która dostępna jest w opcjach zaawansowanych.

Znalazłeś jeszcze coś nowego?

Opisz w komentarzu.

Przykład 1 – camelCase

CamelCase to określenie zapisu ciągu tekstowego, w którym kolejne wyrazy pisze się łącznie, rozpoczyanjąc każdy kolejny wielką literą, np.foreColor, isPaymentPosted. Zapis taki wygląda jak wielkbłąd, stąd nazwa. Jego oddzielenie w Power Query było skomplikowane, ale wraz z dodaniem nowych transformacji, wystarczy jedno kliknięcie.

Sercem operacji są listy Power Query, takie jak alfabet z małej litery (lista a do z) oraz z dużej litery (lista A do Z).

Ważniejsze, że listy te można uzupełniać w Power Query o własne znaki lub listy, co dla zaawansowanych użytkowników otworzy drzwi do niestandardowych przekształceń. Operacja ma też operację przeciwną (z litery wielkiej na małą).

Przykład 2 – poszukiwania kodu pocztowego

Szukałem niedawno sposobu na wyłapanie z ciągu tekstowego kodu pocztowego. Wiele metod zawiodło, ale ta z przejściami między znakami nie była mi jeszcze dana. Teraz mój przypadek rozwiązałbym dużo szybciej – wystarczyło wybrać polecenie Podziel kolumny > Według przejścia z cyfry na znak inny niż cyfra i ewentualnie wskazać, jakie separatory nie mają brać udziału w procesie.

Ja dodałem spację.

Następnie korzystając z poleceń Pierwsze znaki, Ostatnie znaki i Scal kolumny (odpowiedniki Excelowych LEWY, PRAWY i ZŁĄCZ.TEKSTY lub &), wydobyłem kod pocztowy.

Korzystasz z tych opcji?

Podziel się w komentarzu.

Kolumny na wiersze, czyli problem Excel do rozwiązania

Od czasu do czasu zdarzy się sytuacja, która wymaga rozdzielnia kolumn na wiersze wg ogranicznika. Stan „przed” i „po” przedstawiłem na poniższym rysunku.

Rozwiązanie w Power Query dla programu Excel i Power BI

Dane wczytujemy do zapytania:

• Excel 2016 i 365 – karta Dane > Z tabeli/zakresu
• Excel 2010/2013 – na karcie Power Query > Z tabeli/zakresu
• Power BI – z pliku Excel

Następnie zaznaczamy kolumnę do rozdzielenia > karta Przekształć > Podziel kolumny > Wg ogranicznika.

W otwartym oknie wybieramy ogranicznik (np. średnik), a następnie:

1. Wybieramy każde wystąpienie ogranicznika
2. W opcjach zaawansowanych wybieramy wiersze
3. Jeśli nasz tekst jest opatrzony cudzysłowem (czasem tak jest wygenerowany przez systemy źródłowe), oznaczamy wiersze jako ogranicznik.

Otrzymamy dane rozbite na wiersze, które możemy dalej załadować do Excela lub Power BI.

Pobierz plik Excel z zapytaniem Power Query i zerknij na zapytanie

Tu możesz pobrać plik z przygotowanym zapytaniem Power Query i podejrzeć zastosowane kroki