Účty služby Block Blob Storage úrovně Premium
Účty úložiště objektů blob bloku úrovně Premium zpřístupněte data prostřednictvím vysoce výkonného hardwaru. Data se ukládají na disky SSD (Solid-State Drive), které jsou optimalizované pro nízkou latenci. Disky SSD poskytují vyšší propustnost v porovnání s tradičními pevnými disky. Přenos souborů je mnohem rychlejší, protože data se ukládají na okamžitě přístupných paměťových čipech. Všechny části jednotky přístupné najednou. Naproti tomu výkon pevného disku (HDD) závisí na blízkosti dat od hlavic pro čtení a zápis.
Vysoce výkonné úlohy
Účty úložiště objektů blob bloku úrovně Premium jsou ideální pro úlohy, které vyžadují rychlou a konzistentní dobu odezvy nebo mají vysoký počet vstupních výstupních operací za sekundu (IOP). Příklady úloh:
Interaktivní úlohy. Vysoce interaktivní aplikace v reálném čase musí rychle zapisovat data. Aplikace elektronického obchodování a mapování často vyžadují okamžité aktualizace a zpětnou vazbu uživatelů. Například v aplikaci elektronického obchodování se méně často prohlížené položky pravděpodobně neukládají do mezipaměti. Musí se ale zákazníkovi na vyžádání okamžitě zobrazit. Interaktivní editace nebo aplikace pro více hráčů pro online hry udržují kvalitní prostředí díky aktualizacím v reálném čase.
IoT / streamovací analýzy. Ve scénáři IoT se do cloudu může každou sekundu odesílat spousta menších operací zápisu. Je možné přijmout velké objemy dat, agregovat je pro účely analýzy a pak je téměř okamžitě odstranit. Díky vysokým možnostem příjmu dat úložiště objektů blob bloku úrovně Premium je pro tento typ úloh efektivní.
Umělá inteligence/ strojové učení (AI/ML) AI/ML se zabývá spotřebou a zpracováním různých datových typů, jako jsou vizuály, řeč a text. Tento typ vysokovýkonného výpočetního prostředí pracuje s velkými objemy dat, která vyžadují rychlou odezvu a efektivní dobu příjmu dat pro analýzu dat.
Efektivita nákladů
Účty úložiště objektů blob bloku úrovně Premium mají vyšší náklady na úložiště, ale nižší transakční náklady v porovnání se standardními účty pro obecné účely v2. Pokud vaše aplikace a úlohy provádějí velký počet transakcí, může být úložiště objektů blob bloku úrovně Premium nákladově efektivní, zejména pokud je úloha náročná na zápis.
Ve většině případů jsou vhodnými kandidáty pro tento typ účtu úlohy, které provádí více než 35 až 40 transakcí za sekundu na terabajt (TPS/TB). Pokud například vaše úloha provede 500 milionů operací čtení a 100 milionů operací zápisu za měsíc, můžete vypočítat tps/TB následujícím způsobem:
Zápis transakcí za sekundu = 100 000 000 / (30 x 24 x 60 x 60) = 39 (zaokrouhleno na nejbližší celé číslo)
Počet transakcí za sekundu = 500 000 000 / (30 x 24 x 60 x 60) = 193 (zaokrouhleno na nejbližší celé číslo)
Celkový počet transakcí za sekundu = 193 + 39 = 232
Za předpokladu, že váš účet měl v průměru 5 TB dat, pak by hodnota TPS/TB byla 230 / 5 = 46.
Poznámka
Ceny se liší podle operace a oblasti. Pomocí cenové kalkulačky Azure můžete porovnat ceny mezi úrovněmi výkonu Standard a Premium.
Následující tabulka ukazuje nákladovou efektivitu účtů úložiště objektů blob bloku úrovně Premium. Čísla v této tabulce vycházejí z účtu úložiště objektů blob bloku úrovně Premium s povolenou Azure Data Lake Storage Gen2 (pro Azure Data Lake Storage se také označuje jako úroveň Premium). Každý sloupec představuje počet transakcí za měsíc. Každý řádek představuje procento transakcí, které jsou transakcemi čtení. Každá buňka v tabulce zobrazuje procento snížení nákladů spojené s procentem transakce čtení a počet provedených transakcí.
Například za předpokladu, že se váš účet nachází v oblasti USA – východ 2, počet transakcí s vaším účtem překračuje 90 min. a 70 % z těchto transakcí jsou transakce čtení, jsou účty úložiště objektů blob bloku úrovně Premium cenově výhodnější.
Poznámka
Pokud dáváte přednost vyhodnocení efektivity nákladů na základě počtu transakcí za sekundu pro každý TB dat, můžete použít záhlaví sloupců, která se zobrazí v dolní části tabulky.
Scénáře premium
Tato část obsahuje reálné příklady toho, jak někteří naši partneři Azure Storage používají úložiště objektů blob bloku úrovně Premium. Některé z nich také umožňují Azure Data Lake Storage Gen2 která zavádí hierarchickou strukturu souborů, která může dále zvýšit výkon transakcí v určitých scénářích.
Tip
Pokud máte případ použití analýzy, důrazně doporučujeme použít Azure Data Lake Storage Gen2 společně s účtem úložiště objektů blob bloku úrovně Premium.
Tato část obsahuje následující příklady:
- Účty služby Block Blob Storage úrovně Premium
Rychlá hydratace dat
Úložiště objektů blob bloku úrovně Premium vám může pomoct rychle hydratovat nebo oživit vaše prostředí. V odvětvích, jako je bankovnictví, můžou určité zákonné požadavky vyžadovat, aby společnosti pravidelně ukončovaly svá prostředí a pak je znovu vychýlily od nuly. Data použitá k hydrataci prostředí se musí načítat rychle.
Někteří z našich partnerů ukládají každý týden kopii své instance MongoDB do účtu úložiště objektů blob bloku úrovně Premium. Systém je pak z provozu. Aby byl systém znovu rychle znovu online, načte se a načte nejnovější kopie instance MongoDB. Pro účely auditu se předchozí kopie uchovávají po určitou dobu v cloudovém úložišti.
Interaktivní úpravy aplikací
V aplikacích, kde stejný obsah upravuje více uživatelů, se rychlost aktualizací stává kritickou pro zajištění bezproblémového uživatelského prostředí.
Někteří naši partneři vyvíjejí software pro editaci videa. Jakákoli aktualizace videa, kterou uživatel provede, se okamžitě zobrazí ostatním uživatelům. Uživatelé se můžou soustředit na své úkoly a nečekají na zobrazení aktualizací obsahu. Nízké latence spojené s úložištěm objektů blob bloku úrovně Premium pomáhají vytvořit toto bezproblémové prostředí pro spolupráci.
Software pro vizualizaci dat
Uživatelé mohou být mnohem produktivnější se softwarem pro vizualizaci dat, pokud je čas vykreslování rychlý.
Viděli jsme, že společnosti v oboru mapování používají editory mapování ke zjišťování problémů s mapami. Tyto editory používají data generovaná z dat GPS (Global Positioning System) zákazníka. Pokud chcete vytvořit překrývání map, vykreslí software pro úpravy malé části mapy rychlým provedením klíčových vyhledávání.
V jednom případě partner před použitím úložiště objektů blob bloku úrovně Premium používal clustery HBase založené na standardním úložišti pro obecné účely v2. Stále však bylo nákladné udržovat velké clustery v provozu. Tento partner se rozhodl tuto architekturu odejít a místo toho pro rychlé vyhledávání klíčů použil úložiště objektů blob bloku úrovně Premium. K vytvoření překrývání použili rozhraní REST API k vykreslení dlaždic odpovídajících souřadnicím GPS. Účet úložiště objektů blob bloku úrovně Premium jim poskytl nákladově efektivní řešení a latence byla mnohem předvídatelnější.
Podniky elektronického obchodování
Kromě podpory svých obchodů orientovaných na zákazníky můžou firmy elektronického obchodování poskytovat interním týmům také řešení datových skladů a analýz. Viděli jsme, že partneři používají účty úložiště objektů blob bloku úrovně Premium k podpoře požadavků na nízkou latenci těmito řešeními datových skladů a analýz. V jednom případě tým katalogu udržuje aplikaci datového skladu pro data, která se týkají nabídek, cen, způsobů expedice, dodavatelů, zásob a logistiky. Informace se dotazují, kontrolují, extrahují a dominují pro více případů použití. Tým na základě těchto dat provádí analýzu, aby různým prodejním týmům poskytl relevantní přehledy a informace.
Interaktivní analýzy
Téměř v každém odvětví je potřeba, aby podniky interaktivně dotazovaly a analyzovaly svá data.
Datoví vědci, analytici a vývojáři můžou rychleji odvodit časově citlivé přehledy spouštěním dotazů na data uložená v účtu úložiště objektů blob bloku úrovně Premium. Vedoucí pracovníci můžou řídicí panely načítat mnohem rychleji, když data, která se zobrazí na těchto řídicích panelech, pocházejí z účtu úložiště objektů blob bloku úrovně Premium místo ze standardního účtu pro obecné účely v2.
V jednom scénáři potřebovali analytici rychle analyzovat telemetrická data z milionů zařízení, aby lépe pochopili, jak se jejich produkty používají, a aby se mohli rozhodovat o vydání produktu. Ukládání dat v databázích SQL je nákladné. Aby snížili náklady a zvětšili dotazovatelnou plochu, použili účet úložiště objektů blob bloku úrovně Premium s povolenou Azure Data Lake Storage Gen2 a provedli výpočty v Presto a Sparku, aby vytvořili přehledy z tabulek Hive. Díky tomu mají i zřídka přístupná data stejný výpočetní výkon jako často přístupná data.
Pokud chcete odstranit mezeru mezi výkonem sql podsekund a vstupními výstupními operacemi presto za sekundu (IOPs) do externího úložiště, je konzistence a rychlost důležitá, zejména při práci s malými optimalizovanými sloupcovými soubory řádků (ORC). Účet úložiště objektů blob bloku úrovně Premium při použití s Data Lake Storage Gen2 v tomto scénáři opakovaně prokázal 3x vyšší výkon než standardní účet pro obecné účely v2. Dotazy se spouštěly dostatečně rychle, aby se cítily jako místní na výpočetním počítači.
V jiném případě partner ukládá a dotazuje protokoly, které jsou generovány z jeho řešení zabezpečení. Protokoly se vygenerují pomocí Databricks a pak se uloží do účtu úložiště objektů blob bloku s povoleným Data Lake Storage Gen2 úrovně Premium. Koncoví uživatelé se na tato data dotazují a prohledávají pomocí Azure Data Explorer. Tento typ účtu zvolili ke zvýšení stability a zvýšení výkonu interaktivních dotazů. Nastaví také zásady správy Delete Action životního cyklu na několik dní, což pomáhá snížit náklady. Tato zásada jim brání v tom, aby data uchovávali navěky. Místo toho se data odstraní, jakmile už nebudou potřeba.
Kanály zpracování dat
Téměř v každém odvětví je potřeba, aby podniky zpracovávaly data. Nezpracovaná data z více zdrojů je potřeba vyčistit a zpracovat, aby se stala užitečnou pro podřízenou spotřebu v nástrojích, jako jsou řídicí panely dat, které uživatelům pomáhají při rozhodování.
I když rychlost zpracování dat není při zpracování dat vždy nejdůležitější, některá odvětví ji vyžadují. Například společnosti v odvětví finančních služeb často potřebují zpracovávat data spolehlivě a co nejrychleji. Aby tyto společnosti odhalovaly podvody, musí zpracovávat vstupy z různých zdrojů, identifikovat rizika pro své zákazníky a rychle jednat.
V některých případech jsme zaznamenali, že partneři používají k ukládání dat z různých zdrojů více standardních účtů úložiště. Některá z těchto dat se pak přesunou do účtu úložiště objektů blob bloku úrovně Premium s povolenou Data Lake Storage, kde aplikace zpracovávající data často čte nově přicházející data. Volání výpisu adresáře v tomto účtu byla mnohem rychlejší a prováděla se mnohem konzistentněji, než by jinak prováděla ve standardním účtu pro obecné účely v2. Rychlost a konzistence, které účet nabízí, zajistily, že nová data byla vždy co nejrychleji zpřístupněna systémům následného zpracování. To jim pomohlo rychle zachytit potenciální bezpečnostní rizika a reagovat na ně.
Internet věcí (IoT)
IoT se stala významnou součástí našeho každodenního života. IoT slouží ke sledování pohybu aut, ovládání světel a monitorování našeho zdraví. Má také průmyslové aplikace. Společnosti například používají IoT k tomu, aby umožnily své projekty inteligentní továrny, zlepšily zemědělskou výstupu a na ropné plošiny pro prediktivní údržbu. Účty úložiště objektů blob bloku úrovně Premium přidávají těmto scénářům významnou hodnotu.
Máme partnery v těžebním průmyslu. Používají Data Lake Storage Gen2 povolení účtu úložiště objektů blob bloku úrovně Premium spolu se službou HDInsight (Hbase) k ingestování dat snímačů časových řad z několika typů dobývacích zařízení s velmi zdaňovacím profilem zatížení. Úložiště objektů blob bloku úrovně Premium pomohlo uspokojit jejich potřebu příjmu dat s vysokou vzorkovací frekvencí. Je to také nákladově efektivní, protože úložiště objektů blob bloku úrovně Premium je optimalizované pro úlohy, které provádějí velký počet transakcí zápisu, a tato úloha generuje velký počet malých transakcí zápisu (v desítkách tisíc za sekundu).
Machine Learning
V mnoha případech je pro trénování modelu strojového učení potřeba zpracovat velké množství dat. K dokončení tohoto zpracování musí výpočetní počítače běžet dlouhou dobu. V porovnání s náklady na úložiště náklady na výpočetní prostředky obvykle představuje mnohem větší procento vaší faktury, takže zkrácení doby, po kterou výpočetní počítače běží, může vést k významným úsporám. Nízká latence, kterou získáte použitím úložiště objektů blob bloku úrovně Premium, může výrazně zkrátit tuto dobu a vaši fakturu.
Máme partnery, kteří nasazují kanály zpracování dat do clusterů Spark, kde spouští trénování a odvozování strojového učení. Ukládají tabulky Sparku (soubory parquet) a kontrolní body do účtu úložiště objektů blob bloku úrovně Premium. Kontrolní body Sparku můžou vytvořit velké množství vnořených souborů a složek. Operace výpisu adresáře jsou rychlé, protože kombinovaly nízkou latenci účtu úložiště objektů blob bloku úrovně Premium s hierarchickou strukturou dat dostupnou s Data Lake Storage Gen2.
Máme také partnery v odvětví polovodičů s případy použití, které protínají IoT a strojové učení. Zařízení IoT připojená k počítačům ve výrobní továrně pořídí snímky polovodičových oplatek a odešlou je na jejich účet. Pomocí odvození hloubkového učení může systém informovat místní počítače o problému s produkčním prostředím a o tom, jestli je potřeba provést nějakou akci. Umí rychle a spolehlivě načítat a zpracovávat obrázky. Umožňuje to použití účtu úložiště objektů blob bloku úrovně Premium s povoleným Data Lake Storage Gen2.
Analýzy streamování v reálném čase
Aby systém podporoval interaktivní analýzy téměř v reálném čase, musí ingestovat a zpracovávat velké objemy dat a pak tato data zpřístupnit podřízeným systémům. Použití účtu úložiště objektů blob bloku úrovně Premium s povolenou Data Lake Storage Gen2 je pro tyto typy scénářů ideální.
Společnosti v mediálním a zábavním průmyslu můžou během vysílání události generovat velké množství protokolů a telemetrických dat v krátkém čase. Někteří z našich partnerů se při streamování spoléhají na několik partnerů sítě pro doručování obsahu (CDN). Musí se téměř v reálném čase rozhodovat o tom, kterým partnerům CDN bude přidělovat provoz. Proto musí být data k dispozici pro dotazování několik sekund po jejich ingestování. Pro usnadnění tohoto rychlého rozhodování používají data uložená v úložišti objektů blob bloku úrovně Premium a zpracovávají je v Azure Data Explorer (ADX). Veškerá telemetrie, která se nahrává do úložiště, se transformuje ve službě ADX, kde je možné ji uložit ve známém formátu, na který se můžou operátoři a vedoucí pracovníci rychle a spolehlivě dotazovat.
Data se nahrají do několika účtů Blob Storage s výkonem Premium. Každý účet je připojený k prostředku Event Gridu a centra událostí. ADX načte data ze služby Blob Storage a provede všechny potřebné transformace k normalizaci dat (například dekomprese souborů ZIP nebo převod z JSON na CSV). Pak se data zpřístupní pro dotazy prostřednictvím ADX a řídicích panelů zobrazených v Grafaně. Řídicí panely Grafana používají operátoři, vedoucí pracovníci a další uživatelé. Zákazník uchovává své původní protokoly ve službě Premium Performance Storage nebo je zkopíruje do účtu úložiště pro obecné účely verze 2, kde je lze uložit do horké nebo studené úrovně přístupu za účelem dlouhodobého uchovávání a budoucí analýzy.
Začínáme s premium
Nejprve zkontrolujte, jestli jsou vaše oblíbené funkce Blob Storage kompatibilní s účty úložiště objektů blob bloku úrovně Premium, a pak účet vytvořte.
Poznámka
Existující účet úložiště pro obecné účely úrovně Standard v2 nemůžete převést na účet úložiště objektů blob bloku úrovně Premium. Pokud chcete migrovat na účet úložiště objektů blob bloku úrovně Premium, musíte vytvořit účet úložiště objektů blob bloku úrovně Premium a migrovat data do nového účtu.
Kontrola kompatibility funkcí Blob Storage
Některé funkce služby Blob Storage se zatím nepodporují nebo mají částečnou podporu v účtech úložiště objektů blob bloku úrovně Premium. Než zvolíte Premium, projděte si článek Podpora funkcí Blob Storage v účtech Azure Storage a zjistěte, jestli jsou funkce, které chcete používat, plně podporované ve vašem účtu. Podpora funkcí se neustále rozšiřuje, proto nezapomeňte pravidelně kontrolovat aktualizace v tomto článku.
Vytvoření nového účtu úložiště
Pokud chcete vytvořit účet úložiště objektů blob bloku úrovně Premium, nezapomeňte při vytváření účtu zvolit možnost Výkon Premium a typ účtu Objektů blob bloku .
Poznámka
Některé funkce služby Blob Storage se zatím nepodporují nebo mají částečnou podporu v účtech úložiště objektů blob bloku úrovně Premium. Než zvolíte Premium, projděte si článek Podpora funkcí Blob Storage v účtech Azure Storage a zjistěte, jestli jsou funkce, které chcete používat, plně podporované ve vašem účtu. Podpora funkcí se neustále rozšiřuje, proto nezapomeňte pravidelně kontrolovat aktualizace v tomto článku.
Pokud se váš účet úložiště bude používat pro analýzy, důrazně doporučujeme používat Azure Data Lake Storage Gen2 společně s účtem úložiště objektů blob bloku úrovně Premium. Pokud chcete odemknout možnosti Azure Data Lake Storage Gen2, povolte nastavení Hierarchický obor názvů na kartě Upřesnit na stránce Vytvořit účet úložiště.
Následující obrázek ukazuje toto nastavení na stránce Vytvořit účet úložiště .
Kompletní doprovodné materiály najdete v tématu Vytvoření účtu úložiště .