LuckyTemplates Incremental Refresh: Co to je a jak to používat

se vyvinul v cenný nástroj pro firmy pracující s daty a inkrementální obnovování je klíčovou funkcí v LuckyTemplates, která vám může usnadnit práci dynamickou aktualizací dat.

Inkrementální obnova LuckyTemplates je proces, který uživatelům umožňuje obnovovat data progresivně namísto provádění úplné obnovy dat pokaždé. Dokáže výrazně zrychlit obnovu dat a snížit množství dat, která je třeba přenášet mezi LuckyTemplates a zdrojem dat.

V tomto článku vám ukážeme, jak nastavit přírůstkové obnovení v LuckyTemplates jako profesionál, díky čemuž bude váš pracovní postup analýzy dat agilnější a umožní vám činit informovaná rozhodnutí v reálném čase s aktuálními daty na dosah ruky.

Pojďme!

Obsah

• Základy přírůstkové aktualizace LuckyTemplates
  • 1. Power Query a LuckyTemplates
  • 2. Zásady obnovení
  • 3. Logika filtru
  • 4. Datové toky
• Jak nastavit přírůstkové obnovení v LuckyTemplates
  • 1. Správa parametrů
  • 2. Parametry RangeStart a RangeEnd
  • 3. Konfigurace zásad přírůstkového obnovování v LuckyTemplates
• Jak pracovat s daty a filtry při používání LuckyTemplates Incremental Refresh
  • 1. Datové typy Date/Time a Integer
  • 2. Náhradní klíče
  • 3. Vlastní filtr
• Jak zlepšit výkon a efektivitu při používání přírůstkového obnovování v LuckyTemplates
  • 1. Skládání oddílů a dotazů
  • 2. Velké formáty úložiště datových sad
  • 3. Optimalizace spotřeby zdrojů
• Použití přírůstkové aktualizace s různými zdroji dat
  • 1. SQL databáze
  • 2. Režimy DirectQuery a Import dat
  • 3. Datový sklad
• 3 pokročilé techniky a tipy pro používání přírůstkové obnovy
  • 1. Data v reálném čase a obnova
  • 2. Převeďte datum/čas na celé číslo pro DataView
• Závěrečné myšlenky

Základy přírůstkové aktualizace LuckyTemplates

Přírůstkové obnovování LuckyTemplates je velmi užitečný nástroj a pochopení jeho základů je nezbytné, pokud jej chcete využít pro efektivní procesy obnovy dat pro vaše sestavy a řídicí panely.

Mezi tyto základy patří:

1. Power Query a LuckyTemplates

Inkrementální obnovování je funkce v LuckyTemplates, která vám umožňuje načíst pouze nový nebo aktualizovaný datový model, čímž se zvyšuje efektivita vašeho procesu obnovování dat.

Pomocí parametrů data/času Power Query s vyhrazenými názvy RangeStart a RangeEnd rozlišující velká a malá písmena můžete filtrovat data tabulky a dynamicky je rozdělovat na základě přírůstkového rozsahu, abyste oddělili často obnovovaná data od méně často obnovovaných dat.

2. Zásady obnovení

Pokud máte zájem o implementaci procesu přírůstkové aktualizace, postupujte takto:

• Na ploše LuckyTemplates vyberte tabulku s aplikovanými vlastními filtry.

• Klepněte pravým tlačítkem myši a z kontextové nabídky vyberte možnost Incremental Refresh.

• V okně Incremental Refresh, které se otevře, můžete nastavit různé možnosti a definovat zásady.

Zásady, které definujete na ploše LuckyTemplates, budou aplikovány na službu LuckyTemplates.

3. Logika filtru

Logika filtru použitá při přírůstkové aktualizaci je založena na obdobích. Při definování logiky filtru byste měli vzít v úvahu následující faktory:

• Mějte na paměti historické zásady uchovávání dat vašeho zdroje dat.

• Ujistěte se, že zdroj dat podporuje skládání dotazů a přírůstkové aktualizace.

• Určete optimální rozsah pro tabulku dat, abyste minimalizovali dobu načítání.

4. Datové toky

Použití přírůstkové aktualizace s toky dat vyžaduje některé další úvahy:

• Za prvé, váš tok dat musí být umístěn v pracovním prostoru s kapacitou Premium.

• Za druhé, pro přírůstkové obnovení v Power Apps jsou vyžadovány plány Power Apps pro jednotlivé aplikace nebo pro uživatele.

• Nakonec tok dat musí jako cíl používat Azure Data Lake Storage.

Přírůstkové aktualizace v LuckyTemplates vám mohou ušetřit čas a zlepšit efektivitu aktualizací vašich dat.

Nyní, když jsme probrali základy přírůstkového obnovování LuckyTemplates, pojďme se v další části podívat na podrobné vysvětlení, jak nastavit přírůstkové obnovování v LuckyTemplates. 

Jak nastavit přírůstkové obnovení v LuckyTemplates

Nastavení přírůstkové aktualizace v LuckyTemplates je jednoduchý proces. Začnete povolením funkce v editoru Power Query, poté určením požadované tabulky pro aktualizaci a nakonec definováním zásad úložiště a obnovy.

Níže je podrobný návod, jak nastavit přírůstkovou aktualizaci LuckyTemplates:

1. Správa parametrů

Chcete-li nastavit přírůstkové obnovení v LuckyTemplates, musíte nejprve vytvořit parametry data a času pomocí Power Query. Tyto parametry vám pomohou definovat rozsah dat, která se mají postupně obnovovat.

• Otevřete v LuckyTemplates Desktop kliknutím na Transformovat data.

• Přejděte na Spravovat parametry a klikněte na Nový parametr.

2. Parametry RangeStart a RangeEnd

Pro úspěšné přírůstkové obnovení v požadovaném přírůstkovém rozsahu je třeba vytvořit následující dva parametry data/času Power Query s jejich vyhrazenými názvy, v nichž se rozlišují velká a malá písmena:

• RangeStart : Tento parametr představuje počáteční datum rozsahu dat, který chcete zahrnout do přírůstkové aktualizace.

  

• RangeEnd : Tento parametr označuje koncové datum rozsahu dat pro přírůstkovou aktualizaci.

  

Po vytvoření těchto parametrů nyní můžete na soubor dat použít filtr časového období.

3. Konfigurace zásad přírůstkového obnovování v LuckyTemplates

Jakmile nastavíte parametry RangeStart a RangeEnd, můžete nakonfigurovat zásadu přírůstkové aktualizace:

• V LuckyTemplates Desktop klikněte pravým tlačítkem myši na požadovanou tabulku a zvolte Incremental Refresh.

• V okně Nastavení přírůstkové aktualizace zapněte posuvník Přírůstkově aktualizovat tuto tabulku.

• Nastavte zásady úložiště definováním:

  • Počet dní/roků pro ukládání dat ve službě LuckyTemplates.

  • Zásada obnovování pro určení frekvence přírůstkových obnov.

• Po konfiguraci zásad uložte nastavení kliknutím na tlačítko Použít vše.

  

Podle těchto kroků můžete nastavit přírůstkové obnovení v LuckyTemplates a optimalizovat proces obnovení pro velké datové sady. Je to tak jednoduché!

Když už to máme za sebou, podíváme se v další části na to, jak můžete pracovat s daty a filtry při používání přírůstkové aktualizace LuckyTemplates.

Jak pracovat s daty a filtry při používání LuckyTemplates Incremental Refresh

Vědět, jak pracovat s daty a filtry v LuckyTemplates, je užitečné, pokud máte velkou datovou sadu, která se příliš často nemění, ale přesto chcete pravidelně vidět nejnovější data.

Můžete to udělat takto:

1. Datové typy Date/Time a Integer

Při práci s inkrementální aktualizací LuckyTemplates je nezbytné porozumět různým filtrům, které fungují s datem/časem a celočíselným datovým typem.

Pomocí parametrů data/času s vyhrazenými názvy RangeStart a RangeEnd, v nichž se rozlišují velká a malá písmena, můžete efektivně filtrovat data tabulky na základě dat.

Například v tabulce faktů, která obsahuje data od roku 2005, můžete nastavit přírůstkovou aktualizaci tak, aby se uchovávalo pouze posledních deset let a odfiltrovala se data před rokem 2010.

V případě celočíselných datových typů můžete nastavit vlastní filtry pro správu přírůstkového obnovení. To pomáhá rozdělit a oddělit data, která vyžadují časté obnovování, od dat, která nevyžadují tolik aktualizací.

2. Náhradní klíče

Náhradní klíče hrají klíčovou roli při práci s přírůstkovým obnovováním v LuckyTemplates. Tyto jedinečné klíče pomáhají při správě a řízení dat tabulky.

Když během procesu konfigurace použijete náhradní klíče, můžete snadno sledovat všechny změny nebo aktualizace ve vašich datech a zároveň zajistit, že primární klíč nebude změněn.

To umožňuje efektivní a efektivní přírůstkové aktualizace při zachování integrity vašich dat.

3. Vlastní filtr

Kromě datových typů data/času a celých čísel můžete také vytvářet a používat vlastní filtry v přírůstkové aktualizaci. Vlastní filtry vám pomohou lépe spravovat a rozdělovat data na základě konkrétních potřeb nebo kritérií.

Zde je podrobný průvodce vytvořením vlastního filtru:

1. Klikněte pravým tlačítkem na tabulku faktů a vyplňte požadovaná pole pro konfiguraci přírůstkové aktualizace.

2. Vytvořte dva parametry datového typu Date/Time s názvy RangeStart a RangeEnd. Nastavte výchozí hodnotu pro každý parametr.

3. Implementujte funkci vlastního filtru ve svém dotazu nebo krocích zpracování dat a filtrujte data na základě vašich specifických požadavků.

Pomocí vlastních filtrů můžete efektivně organizovat a spravovat data ve svém řešení LuckyTemplates a zajistit tak optimální výkon a použitelnost.

Mějte na paměti nastavení přírůstkového obnovování, abyste se nedostali do pastí nebo čelili problémům, které by mohly narušit váš celkový zážitek.

Po pochopení toho, jak pracovat s daty a filtry v LuckyTemplates, se pojďme ponořit do toho, jak můžete zvýšit výkon a efektivitu svých sestav a řídicích panelů využitím přírůstkové aktualizace v další části.

Jak zlepšit výkon a efektivitu při používání přírůstkového obnovování v LuckyTemplates

Existují různé způsoby, jak zlepšit výkon a efektivitu při použití přírůstkové aktualizace v LuckyTemplates. Na některé z nich se podíváme níže.

1. Skládání oddílů a dotazů

Když v LuckyTemplates nakonfigurujete přírůstkové obnovení, vaše tabulka se automaticky rozdělí. Jeden oddíl obsahuje data, která je třeba často obnovovat, zatímco druhý oddíl obsahuje řádky, které se nemění.

To zlepšuje výkon a efektivitu procesu obnovy. V tomto procesu hraje roli také skládání dotazů; kombinuje více kroků dotazu do jednoho databázového dotazu, čímž snižuje množství zpracování a čas potřebný pro aktualizace sestav.

2. Velké formáty úložiště datových sad

LuckyTemplates Premium vám umožňuje pracovat s velkými datovými sadami efektivněji pomocí formátů úložiště, jako je Columnstore a Aggregations.

Při zpracovávání velkého množství dat tyto formáty úložiště urychlují výkon obnovování a umožňují rychlejší interakci s přehledy.

• Columnstore : Tento formát zvyšuje výkon dotazů náročných na čtení díky jeho sloupcovému ukládání a komprimaci.

• Agregace : Tato funkce zajišťuje, že mnoho dotazů lze zodpovědět agregovanými tabulkami, čímž se snižuje potřeba přístupu k velkým tabulkám faktů, a tím se zlepšuje výkon.

Použití těchto formátů úložiště při práci s LuckyTemplates Premium zefektivní správu velkých datových sad LuckyTemplates.

3. Optimalizace spotřeby zdrojů

Monitorování a optimalizace spotřeby zdrojů jsou klíčové pro udržení výkonu vašeho systému LuckyTemplates. Můžete to udělat takto:

• Sledování využití paměti : Analyzujte metriku PeakMemory během operací obnovy datové sady, abyste pochopili maximální spotřebovanou paměť. Sledování této hodnoty vám pomůže identifikovat případná úzká hrdla a optimalizovat využití paměti.

• Monitorování využití CPU : Sledujte MashupCPUTime, který udává celkový čas CPU spotřebovaný Power Query Engine pro všechny dotazy. Tento přehled vám umožní optimalizovat vaše dotazy a minimalizovat spotřebu.

Celkový výkon a efektivitu svého systému LuckyTemplates můžete zlepšit implementací výše uvedených věcí a využitím formátů, jako je dělení, skládání dotazů a velké datové sady.

Dále prozkoumáme, jak nakonfigurovat přírůstkové obnovení pomocí různých zdrojů.

Použití přírůstkové aktualizace s různými zdroji dat

LuckyTemplates Incremental Refresh můžete použít s různými zdroji dat, včetně , DirectQuery a režimů importu dat a datových skladů.

Zde je několik věcí, které je třeba zvážit při výběru zdroje dat pro import do LuckyTemplates:

1. SQL databáze

Při práci s databázemi SQL jako zdrojem dat nezapomeňte:

• Vytvořte parametry data/času Power Query s vyhrazenými názvy rozlišujícími malá a velká písmena: RangeStart a RangeEnd.

• Použijte filtry na data pomocí těchto parametrů k oddělení často a méně často obnovovaných dat.

• Před publikováním do služby LuckyTemplates definujte zásady přírůstkové aktualizace v LuckyTemplates Desktop.

Mějte na paměti, že přírůstkové obnovení je podporováno pouze v prostředích LuckyTemplates Pro, LuckyTemplates Embedded a Premium per-user plan.

2. Režimy DirectQuery a Import dat

LuckyTemplates nabízí dva režimy přístupu k datům: DirectQuery a Import Data .

Použití přírůstkové aktualizace s těmito režimy zahrnuje následující:

• DirectQuery : V režimu Direct Query dotazujete data ze zdroje dat v reálném čase, což znamená, že do vaší datové sady LuckyTemplates nejsou importována žádná data. Incremental Refresh s Direct Query můžete použít pouze v případě, že máte LuckyTemplates Premium, LuckyTemplates Embedded datové sady nebo Premium na uživatelský plán.

• Import dat : ​​V tomto režimu importujete data do své datové sady LuckyTemplates a s importovanými daty pak můžete pracovat. Chcete-li použít přírůstkovou aktualizaci s režimem Import dat, nakonfigurujte parametry RangeStart a RangeEnd, použijte filtry a definujte zásady přírůstkové aktualizace.

3. Datový sklad

Použití přírůstkové aktualizace s datovými sklady je podobné jako používání databází SQL. Postupujte podle stejných kroků a vytvořte parametry RangeStart a RangeEnd, aplikujte filtry na oddělená data na základě frekvence obnovování a definujte zásady přírůstkové aktualizace před publikováním datové sady do služby LuckyTemplates.

Ujistěte se, že rozumíte režimům přístupu k datům a omezením vašeho prostředí LuckyTemplates pro správné využití přírůstkové aktualizace s různými zdroji dat.

Správně nakonfigurované přírůstkové aktualizace mohou zlepšit efektivitu ukládání dat a zajistit, aby byly pro vaše sestavy LuckyTemplates k dispozici nejaktuálnější informace.

Protože jsme si prošli, jak používat přírůstkové obnovování u různých zdrojů dat, podíváme se v další části na pokročilé tipy a triky při používání přírůstkového obnovování LuckyTemplates.

Tyto tipy a triky vám pomohou vytěžit z vašich dat maximum a ujistit se, že přírůstkové obnovování používáte správně.

3 pokročilé techniky a tipy pro používání přírůstkové obnovy

Níže jsou uvedeny pokročilé tipy a techniky, které můžete úspěšně nasadit a optimalizovat přírůstkovou aktualizaci LuckyTemplates ve vašem datovém modelu:

1. Data v reálném čase a obnova

Při práci s LuckyTemplates je pro optimální výkon nezbytné efektivně nakonfigurovat přírůstkové obnovování a data v reálném čase.

Přírůstková aktualizace umožňuje specificky aktualizovat nová nebo upravená data namísto celé datové sady. Při spárování s daty v reálném čase můžete efektivně aktualizovat svůj přehled nejnovějšími informacemi.

Chcete-li tyto schopnosti využít, nakonfigurujte buď prostřednictvím LuckyTemplates Desktop nebo nástrojů, jako je skriptovací jazyk Tabular Model Scripting Language (TMSL) nebo Tabular Object Model (TOM) prostřednictvím koncového bodu XMLA.

2. Převeďte datum/čas na celé číslo pro DataView

Převod hodnot data/času na celá čísla usnadňuje práci s daty a optimalizuje efektivitu obnovování. Zde jsou kroky k převodu data/času na celé číslo v Power Query:

1. Otevřete Editor Power Query v LuckyTemplates.

2. Vyberte sloupec obsahující hodnoty Datum/Čas.

3. Přejděte na kartu Transformace a klikněte na Typ dat.

4. Jako nový datový typ zvolte Celé číslo.

Tento převod podporuje lepší výkon snížením zátěže při zpracování dat během přírůstkových aktualizací.

3. Obnovte pouze úplné dny

Při konfiguraci zásad přírůstkové obnovy je klíčové pouze obnovovat celé dny, protože to zabraňuje zbytečnému zpracování dat a zkracuje dobu načítání sestav.

Chcete-li toho dosáhnout, postupujte takto:

1. Na ploše LuckyTemplates klikněte pravým tlačítkem na tabulku a vyberte možnost Přírůstkové aktualizace.

2. V okně Incremental Refresh definujte filtr, například Date_IS_AFTER = Date.IsAfterOrEqual([Date], DateTimeZone.SwitchZone(DateTime.LocalNow(), -TimeZoneOffset)))

3. Nakonfigurujte parametry ' rangeStart ' a ' rangeEnd ' tak, aby se používaly pouze celé dny. Například nastavte ' rangeEnd ' na datum předchozího dne.

Použitím těchto pokročilých technik a tipů můžete zajistit efektivní správu datových sad, generování sestav a lepší výkon ve vašem pracovním postupu LuckyTemplates.

Závěrečné myšlenky

A tady to máme! Odhalili jsme záhadu LuckyTemplates Incremental Refresh. Není to jen nějaký technický žargon, ale změna hry, díky které může být manipulace s masivními datovými sadami hračka a zároveň vám ušetří nějaký čas a zdroje.

Jako uživatel LuckyTemplates můžete výrazně těžit z funkce Incremental Refresh. Tato pokročilá funkce oblíbeného nástroje business intelligence společnosti Microsoft šetří zdroje a čas tím, že pouze obnovuje nová nebo změněná data ve vašich datových sadách.

Takže pokračujte, vyzkoušejte to a vyzkoušejte, jak to přináší efektivitu vašich aktualizací dat. Pamatujte si, že ve světě dat zůstat v aktuálním stavu znamená zůstat napřed!

Pokud se chcete o LuckyTemplates dozvědět více, můžete se podívat na video níže: