17. srpna 2018

SQL Server Bootcamp 2018


15-16.8 v Brně proběhnul SQL Server Bootcamp. Konference pro lidi pracující s SQL Serverem, Power BI a dalšími datovými technologiemi z dílny Microsoftu. Děkuji všem účastníkům, sponzorům a dobrovolníkům z WUGu za skvělou akci. Bylo mi potěšením odpřednášet 4 témata.
Úvod do Business Intelligence světa a žargonu v přednášce BI pro ne BI lidi.
Dále moje posbírané „Best Practices“ pro Power BI v přednášce „Power BI Best Practices“.
Metody připojení použitelné v Power BI jsem rozebral v přednášce „Power BI Import dat, živé připojení a kompozitní modely“ Zde jsem chtěl hlavně představit nové kompozitní modely, o kterých jsem psal článek zde:
Uzavřel jsem technicky lehcé náročnější, ale snad přehlednou formou vysvětlený „Dynamický partitioning OLAP kostek s použitím SSIS“ Zde se jednalo o popis reálného problému z práce, který se ale může určitě hodit více lidem. Principy probrané v přednášce se věřím mohou hodit mnohým.
Slíbil jsem, že se podělím o prezentace a solution z poslední přednášky pro partitioning OLAPů. Slíbené materiály najdete zde
Jakmile budou k dispozici záznamy přednášek, dám vědět v samostatném článku.
Přeji pěkný víkend



30. července 2018

Publikace Power BI reportu do SharePointu Online


Nedávno jsem psal blog post, proč nepoužívat funkci Publish To Web v Power BI (http://www.neoral.cz/2018/07/power-bi-proc-nepouzivat-publish-to-web.html). Důvod byl bezpečnost dat. Zmiňoval jsem, že jako alternativa je použití funkce "Embed To SharePoint". Jak na to a jaká jsou úskalí? O tom bude dnešní článek.
Abyste mohli vkládat Power BI reporty do SharePointu online, potřebujete takzvané "Modern pages". Tyto je potřeba explicitně povolit. Dělá se to v Site settings-Manage Site Features-Site Pages-Activate
Dále vytvoříte novou Site Page


Kliknete na plusko pro přidání obsahu a najdete Power BI


Vyberete add report


Přepnete se do Power BI portálu do reportu, který chcete sdílet a zvolíte v menu file - Embed To SharePoint. Zkopírujete link, nastavíte velikost reportu. Zvolíte, zda chcete zobrazit navigaci mezi stránkami a lištu s filtry po pravé straně. 


Stránku vypublikujete a případně přidáte link na ni na nějaké viditelné místo. 
Na rozdíl od Publish To Web je možno vkládat touto formou vytvořené reporty i takové, které využívají live connection a sice proto, že dochází k ověření uživatele. To má ale také "nepříjemný" dopad. Spíše vlastnost. Pokud chcete, aby uživatel report viděl, musíte s ním report explicitně nasdílet. A abyste s ním mohli report mohli explitně nasdílet, uživatel potřebuje Pro licenci. Nebo musíte mít zakoupené Power BI Premium. Poté můžete sdílet i se všemi Free uživateli

Embedování do SharePointu je bezpečnou variantou, jak se o reporty podělit v rámci stránky SharePointu online. Nevýhodou může být složitější administrace a vyšší finanční náročnost. Bezpečnost citlivých dat v době GDPR ale určitě tyto drobné nevýhody vykoupí :)

24. července 2018

Kompozitní modely

Tento měsíc jsme si na nový Power BI Desktop počkali o něco déle. Určitě to souviselo s probíhajícím Microsoft Business Applications Summitem, kde bylo oznámeno další směřování produktu. K dnešnímu tématu. Co jsou kompozitní modely?
V Power BI Desktopu můžeme tradičně volit mezi 2mi typy připojení. Data Importem a živým připojením. O metodách připojení jsem mimo jiné psal v tomto článku anglicky zde http://www.neoral.cz/2016/10/power-bi-live-connection-vs-import.html a také přednášel zde https://www.youtube.com/watch?time_continue=2&v=NtQqTaI4w7E
Import může kombinovat libovolný počet zdrojů. Živé připojení bylo ale odsouzeno k tomu, že jste byli uvězněni do jednoho jediného zdroje.
To se nyní mění právě díky kompozitním modelům.
Kompozitní model umožňuje kombinovat více zdrojů s živým připojením (zatím jen tabulární typ, ne multidimenzionální kostky atd.). A také umožňuje kombinovat metodu import s živým připojením.
Tato preview funkce se povoluje v menu File-Options-Preview Features-Composite Models



V pravém dolním rohu obrázku vidíte, že jsem v režimu Storage Mode: Direct Query. Přesto však nemám zašedlý Get Data Dialog.
První zdroj jsem pro účel screenshotu zvolil ContosoRetailDW
Jako druhý si vezmu AdventureWorksDW z jiného serveru. Tam si vezmu tabulku FactInternetSales
Vyskočí potential security risk



V relationship window můžu udělat logickou vazbu (i když mezi těmito databázemi opravdu není) mezi tabulkou DimDate Na jedné straně ai FactInternetSales na druhé přes OrderDate. Vyskočí mi, že typ vazby bude Many to Many (další novinka, které se nejspíš v detailu pověnuji samostatně). Je to totiž trošičku jiné Many to Many, než znáte z databází. Kdo by si chtěl přečíst v originále, můžete zde: https://docs.microsoft.com/en-us/power-bi/desktop-many-to-many-relationships



Na úrovni jednotlivých objektů potom můžete v table properties definovat, jestli chcete, aby daná tabulka byla braná jako import, živé připojení, nebo dual.



Výhodou by mělo být omezení bombardování backendového zdroje opakovanými dotazy například pro hodnoty slicerů. Abyste ten zdroj netrápili více, než je nezbytně nutné.

Pokud byste se chtěli podívat na kompozitní modely na živo, v Brně proběhne konference SQL Server Bootcamp (3.ročník s bezplatnou registrací zde: https://wug.cz/brno/akce/1080-SQL-Server-Bootcamp-2018 )

Navrhnul jsem téma "Power BI – Import dat vs. živé připojení a dál" kde jsem chtěl o tomto tématu mluvit. Když se o kompozitních modelech ví už veřejně, můžu přednášku přejmenovat na "Power BI – Import dat, živé připojení a kompozitní modely"

Moje další témata na Bootcampu jsou:
BI řešení pro ne BI lidi
Dynamický partitioning OLAP kostek s použitím SSIS
Master Data Services a jejich využití pro BI vývojáře
Power BI – Best practices
Power BI – Co nového a dobrého přinesly poslední měsíce

Témat jsem nasázel tradičně hodně a věřím, že se všechny do programu nevlezou :) Ale na Bootcampu Vás rád uvidím.

Po krátké reklamní vložce zpátky ke kompozitním modelům. VELKÝ POZOR. Modely s touto funkcí zatím nejdou publikovat do Power BI Service. Tož si ty vaše produkční reporty prvně někam odzálohujte, než si s tím začnete hrát :)

Těším se, až bude možno dělat live connection i nad multidimenzionálními zdroji, což je určitě logický krok, kam by se mohla technologie vyvíjet dál. Přeji příjemnou zábavu s kompozitními modely.

9. července 2018

Power BI - Proč nepoužívat Publish to web

Na začátek lehce provokativní název. Blog by se mohl jmenovat spíš "Kdy nepoužívat Publish to web a jak se bránit" To by měl ale potom možná méně kliků :)
Proč bych Vás nyní zrazoval od sdílení na web v Power BI, když jsem sám v minulosti lákal článkem "Veřejné sdílení reportů". http://www.neoral.cz/2016/02/power-bi-verejne-sdileni-reportu.html
Ono veřejné sdílení reportů může být vhodné za určitých situací. S mnou sdíleným kurzovním lístkem ČNB by asi problém nebyl.
Problém nastává v situaci, kdy se firmy a jednotlivci snaží používat Power BI zadarmo a za účelem obcházení licenčního modelu. Nebo si jen nejsou vědomí dopadu svých akcí.
Neboť jak praví svaté písmo (dokumentace) https://docs.microsoft.com/en-us/power-bi/service-publish-to-web

Když chcete použít Publish to web, vězte, že vypínáte zabezpečení. Je to vhodné použít pouze pro obsah, kde nevadí, že REPORT I DATA jsou veřejně dostupná komukoliv z internetu. 
Člověk si může myslet, že kód pro sdílení je natolik strašidelný a neodhadnutelný, že se k tomu přece nikdo nedostane. Člověk si ten kód sice nevycucá, ale co stroje? Obsah reportů včetně detailních dat může být nelezen roboty a je indexován vyhledávači (Bingem počínaje, ale těžko říct, kde konče).
Takže je potřeba si položit otázku: 
Opravdu nasdílím v době GDPR data zákazníka touto formou? Vystavím takto data zaměstnanců? Vystavím takhle do internetu finanční data firmy?
Každý si odpovězte sám, já si za sebe řekl, že ne :)
Pokud chcete nasdílet na SharePointu něco ze zmiňovaných typů reportů, existuje zde bezpečná alternativa "Embed in SharePoint Online".
Více informací o této funkci v originále https://docs.microsoft.com/en-us/power-bi/service-embed-report-spo

Jak se tedy bránit z pohledu Admina?
V Admin portále můžete jednak zkontrolovat kdo co vypublikoval touhle formou, včetně možnosti embed kód smazat
Nebo můžete rovnou přistoupit k drastické metodě a zakázat tuhle funkci pro celou organizaci

Admin Portal - Tenant Settings
Závěr
Přeji příjemnou zábavu při prohlížení toho, co kolegové z organizace nasdíleli. Stejně tak pevné nervy při mazání obsahu a zakazování :)

20. června 2018

WUG Days 2018 - záznamy

Na začátku dubna proběhla v Brně konference WUG Days, na které jsem měl 3 přednášky na téma Power BI. Díky Davidovi Gešvindrovi jsou dostupné sestříhané záznamy na stránkách WUG
První byla o přípravě dat u importu do Power BI, záznam naleznete zde:
https://www.wug.cz/zaznamy/465-WUG-Days-2018-Power-BI-Priprava-dat
Druhá o tvorbě datového modelu, a jeho optimalizaci, záznam zde:
https://www.wug.cz/zaznamy/466-WUG-Days-2018-Power-BI-Datove-modelovani-a-optimalizace
Třetí o tvorbě reportů v Power BI, ke shlédnutí zde:¨
https://www.wug.cz/zaznamy/467-WUG-Days-2018-Power-BI-Tvorba-reportu

Přeji příjemnou zábavu na dlouhé večery doma, nebo dlouhá odpoledne v prázdné kanceláři o nadcházejících prázdninách :)

18. května 2018

Power BI – Inkrementální plnění

Po konferenčním maratonu další článek o Power BI. Rozcestník se seznamem najdete zde http://www.neoral.cz/2016/10/power-bi-rozcestnik.html
V poslední aktualizaci Power BI Desktopu přibyla možnost nastavit inkrementální plnění u importu dat. Kdo aktualizujete větší objemy dat, jistě byste tuhle možnost ocenili.
Místo pěti let aktualizovat jen poslední den/týden.
Jak to funguje? Konfigurace probíhá v Power BI Desktopu. Ten ale naplnit jen přírůstek neumí. Počítá se totiž s automatizací v Power BI Service (powerbi.com)
Má to jednu vadu na kráse a sice funguje to jen v Power BI Premium (nabídka pro Enterprise zákazníky, psal jsem zde http://www.neoral.cz/2017/05/power-bi-premium-zmeny-v-power-bi-free.html).
Power BI Premium je cenově hůře dostupné, než licence Pro (fungující ve sdílené infrastruktuře, které by zrovna inkrementální plnění pomohlo).
K demonstraci použiji své oblíbené demo s kurzovním lístkem ČNB http://www.cnb.cz/cs/financni_trhy/devizovy_trh/kurzy_devizoveho_trhu/rok.txt?rok=2018
V prvé řadě si nachystám dataset bez inkrementu
Důležité je, aby sloupec datum měl datový typ Date/Time pro jiné datové typy zatím nefungují a to ani pro Date.
Kód v „M“
let
   Source = Csv.Document(Web.Contents("http://www.cnb.cz/cs/financni_trhy/devizovy_trh/kurzy_devizoveho_trhu/rok.txt?rok=2018"),[Delimiter="|", Columns=34, Encoding=65001, QuoteStyle=QuoteStyle.None]),
   #"Promoted Headers" = Table.PromoteHeaders(Source, [PromoteAllScalars=true]),
   #"Unpivoted Other Columns" = Table.UnpivotOtherColumns(#"Promoted Headers", {"Datum"}, "Attribute", "Value"),
   #"Changed Type with Locale" = Table.TransformColumnTypes(#"Unpivoted Other Columns", {{"Datum", type datetime}}, "cs-CZ"),
   #"Changed Type with Locale1" = Table.TransformColumnTypes(#"Changed Type with Locale", {{"Value", type number}}, "cs-CZ"),
   #"Split Column by Delimiter" = Table.SplitColumn(#"Changed Type with Locale1", "Attribute", Splitter.SplitTextByEachDelimiter({" "}, QuoteStyle.Csv, false), {"Attribute.1", "Attribute.2"}),
   #"Changed Type" = Table.TransformColumnTypes(#"Split Column by Delimiter",{{"Attribute.1", Int64.Type}, {"Attribute.2", type text}}),
   #"Renamed Columns" = Table.RenameColumns(#"Changed Type",{{"Attribute.1", "Pocet"}, {"Attribute.2", "Mena"}, {"Value", "Kurz"}})
in
   #"Renamed Columns"
Dále je potřeba v Desktopu povolit inkrementy v Preview Features
Dále nad DateTime sloupcem vytvoříme between filtr a vybereme odkaz na parametr
Parametry nachystáme 2. Mají pevně předepsaná jména kvůli rozpoznání ze strany Power BI service a musí se jmenovat RangeStart a RangeEnd.
Datový typ opět Date/Time. Current value je hodnota pro iniciální load
Filter vypadá potom následovně
Následuje pravé tlačítko na dotaz a výběr Incremental Refresh
Vyplníme dialog pro inkrementální politiku. Kolik dat načítat celkem a jaký časový údaj se má brát jako přírůstek
Zbývá nasadit do Power BI Premium tenantu. Standartní workspace bez dedikované kapacity nejde vybrat.
Refresh na straně service se nastavuje standartně. Jen data source credentials (uživatelské jméno, heslo, nebo anonymní přístup jako v případě webu).
A čas, kdy to má běhat.
Závěr

Inkrementální refresh pomůže hlavně aktualizacím větších datových modelů, pokud historie je již neměnná. Jen škoda toho licencování.
Ale třeba se časem dočkáme i u Pro licencí.

26. března 2018

Power BI Roadmap – jaro 2018

Být na MVP summitu, slyšet všechny úžasné věci, které se chystají a nemoci o tom mluvit... Bylo těžké, ale zvládnul jsem to.
Nyní ale díky Dynamics 365 Release Notes, které vyšly veřejně se s vámi můžu podělit o část toho, co se ví že přijde do Power BI v horizontu cca 6 měsíců.
Na dokument o Dynamics 365 Release Notes mě upozornil článek, který napsal Chris Webb zde https://blog.crossjoin.co.uk/2018/03/21/power-bi-roadmap-announcements-in-the-dynamics-365-spring-18-release-notes/
Nejsem translátor, tak Vám napíšu své vlastní shrnutí a své pohledy na věc. Celý dokument v angličtině najdete zde: https://aka.ms/businessappsreleasenotes
Inkrementální aktualizace dat
V Power BI desktopu půjde definovat politiky pro inkrementální loady. Nebude nutno opakovaně tahat celou historii, půjde aktualizovat pouze přírůstek dat.
Přírůstek se bude definovat v Desktopu, ale pro samotnou aktualizaci na straně služby budete potřebovat Power BI Premium
(na pozadí partitioning a tento byl po většinu času Enterprise feature).
Uchovatelné filtry
Minulá aktualizace desktopu přinesla možnost v preview módu zakázat ukládání konfigurace slicerů do příští session.
Čekalo se na to, až to bude podporovat služba. Ta už to umí a umí to automaticky. Když opustíte report, ten si u vestavěných slicerů (ne custom visuals) pamatuje nastavení.
Pokud se chcete vrátit do původního nastavení, je k tomu použitelné následující tlačítko
Zrychlení výpočtů nad Direct Query připojením díky in-memory agregacím
Tohle bylo demonstrováno na PASS Summit key note.
Data půjdou předpočítat na určité úrovni, do této úrovně se bude sahat do in-memory úložiště, větší detail potrápí direct query. Premium feature.
Slideshow režim
Chcete dát Power BI report na obrazovku třeba na recepci, aby se automaticky přepínaly stránky?
Z vlastní zkušnosti mohu říct, že zatím to šlo dělat jen díky vlastní aplikaci, nebo pluginům v prohlížeči.
Ani tak ani tak, to nebylo ideální. Půjde to tedy jinak
SSRS reporty v Power BI Service
Jakože .rdl report. A opět Premium Power BI workspace. Bez SSRS serveru.
Tak tohle je mazec, na který se velmi těším. Než to vyleze, musíme dořešit licence.
Power BI premium workspace integrace s SSAS
V podstatě se bude Workspace chovat jako SSAS server. Z Power BI Premium workspace se stane nadmnožina SSAS.
Některé vlastnosti prvně přibydou do Power BI Premium, pak do SSAS Tabular v cloudu, pak do on premises prostředí.
Některé věci budou dostupné ale jen v Power BI Premium.
Závěr

Nových funkcí ve výhledu je více a já nechci psát telefonní seznam. Shrnul jsem ty nejpřínosnější funkce z odtajněné roadmap, které vidím jako přínosné ze svého pohledu. Trend je jasný.
Udělat Premiovou nabídku lákavější. Momentálně si Premium pořídí firma pouze, pokud ji to vyjde levněji, než Pro licence na všechny uživatele (láme se to někde u 500 uživatelů).
Nebo pokud chtějí zoufale on-premises Power BI report server a nemají SQL Server Enterprise se Software Assurance. Případně je limitují nějaké kapacitní limity (počet aktualizací).
To co se ale chystá do budoucna přinese nové argumenty do diskuze, zda je Premium potřeba.