Data Discovery

Analiza danych pochodzących z Twittera z wykorzystaniem C# i Power BI

post_logo_publish_post
Follow me on

Slawomir Drzymala

Still playing with data and .NET technologies
Slawomir Drzymala
Follow me on

Poprzedni post, “Podsumowanie Microsoft Ignite 2017 – analiza wydarzenia na Twitterze z wykorzystaniem Power BI”, pokazywał konkretny przykład analizy wybranego hashtagu w Power BI. Mimo, że Power BI wspiera naprawdę dużo źródeł danych, nie ma niestety bezpośredniego połczenia do portalu Twitter. Owszem, można skorzystać z oficjalnego API dostarczanego przez Twitter i wykorzystać, nawet bezpośrednio, z poziomu Power BI, natomiast problemem mogą okazać się limity. Dość skomplikowanym etapem jest również przygotowanie danych do analizy. Tutaj również, mimo, iż Power BI dostarcza ogromna ilość transformacji, w przypadku analizy tekstu wymaga to naprawdę sporo pracy i jest stosunkowo wolne. Przykład analizy tekstu w Power…
Read more

Wykorzystanie C# i PowerShell do monitorowania SSAS

Follow me on

Slawomir Drzymala

Still playing with data and .NET technologies
Slawomir Drzymala
Follow me on

Wprowadzenie Analysis Services, jak już zostało to omówione w poście “Metody monitorowania i optymalizacji SQL Server Analysis Services” (http://pl.seequality.net/monitorowanie-optymalizacja-ssas/), dostarcza wielu różnych opcji za pomocą których możemy monitorować oraz analizować stan serwera, baz danych analitycznych, a nawet poszczególnych obiektów. Czasami zdarza się jednak, że dostępne metody nie dostarczają informacji, których szukamy lub dostarczają informację na temat poszczególnego obiektu bez możliwości wygenerowania raportu dla zbioru takich elementów. Może się wówczas okazać, że takie informacje można pobrać samemu wykorzystując w tym celu język C# lub PowerShell. W niniejszym poście zaprezentuję prostą bibliotekę C# oraz skrypty PowerShell, które według mnie mogą okazać się…
Read more

SSAS – Kto korzysta z kostki?

SSAS new vs returning users
Follow me on

Slawomir Drzymala

Still playing with data and .NET technologies
Slawomir Drzymala
Follow me on

Pierwszy przypadek wykorzystania danych z logowania kostek i serwera dotyczy analizy użytkowników. Do wizualizacji danych użyty zostanie PowerBI. W ramach przypomnienia dodam tylko, że post opisujący dostępne metody gromadzenia danych oraz analizowania kostek i SQL Server Analysis Services dostępny jest pod adresem http://pl.seequality.net/monitorowanie-optymalizacja-ssas/. Pełny raport oraz projekt SSIS dostępny jest na github: https://github.com/seequality/seequality_ssas Cała idea polega na tym, aby przygotować projekt SSIS, a następnie Job, który co dziesięć minut będzie pobierał aktualną listę sesji i połączeń do serwera SQL Server Analysis Services. Dzięki zgromadzonym danym będziemy w stanie następnie przygotować raport w Power BI, który pomoże nam zrozumieć kim są użytkownicy kostki…
Read more

Data Quality Services – Domain management

Każdy z nas zdaje sobie sprawę z tego jak ważna jest jakość danych w organizacjach. Nawet najbardziej wyrafinowane algorytmy nie będą skuteczne jeśli dane wejściowe będą zanieczyszczone – bardzo dobrze podsumowuje to stwierdzenie “garbage in – garbage out” czyli mając śmieciowe dane na wejściu zawsze otrzymamy śmieciowe rezultaty bez względu na to co będzie pomiędzy. Dlatego też niezmiernie ważne jest to aby zadbać o jakość danych przeznaczonych do analizy raportowania czy bardziej wyszukanych zastosowań uczenia maszynowego. Przeglądając literaturę czy też kursy związane właśnie z uczeniem maszynowym czy też eksploracją danych prawie zawsze rozpoczynają się one od tematu przygotowania danych –…
Read more

Samoobsługowy Business Intelligence – fakt czy nieosiągalna utopia

Podczas licznych wizyt u Klientów i rozmów z nimi bardzo często prędzej czy później pojawia się pojęcie samoobsługowego Business Intelligence. Prawdą jest to, że pojęcie to jest dosyć ciekawym sloganem powtarzanym jak mantra przez kolejnych dostawców oprogramowania mówiących o tym, że ich produkt jest jedynym i najlepszym narzędziem umożliwiającym wydajną analizę danych w taki a nie inny sposób- ile w tym prawdy, a ile fałszu? Postaram się to przedstawić w ramach niniejszego artykułu. Dodatkowo przedstawię mój subiektywny punkt widzenia na tego typu podejście do analizy danych na podstawie oprogramowania Microsoft- zapraszam do lektury. Na samym początku wyjaśnijmy pojęcie Self-Service Business…
Read more