Vizuální analytika a zpětná vazba. Vizualizace velkých dat. Vizualizace a vyvozování závěrů
Data jsou novou globální měnou a internet ano směnárna. Je snadné se ztratit v informačních tocích. Jak prezentovat data, abyste upoutali pozornost? Uživatel pochopí tabulku o deseti řádcích a třech sloupcích. Co když jsou to tisíce, statisíce řádků?
Zdůraznit Klíčové body a vzory, které nelze detekovat v suchých číslech pomocí infografiky, interaktivní widgety na webových stránkách a panelech. S tím pomohou vizualizační nástroje.
Podívejte se a používejte 21 vizualizačních nástrojů v tomto článku.
Služby pro vytváření tabulek a grafů
Infogr.am
Služba pro vytváření interaktivní, vestavěné vizualizace. Více než 30 typů grafů a šest návrhových témat.
Zadejte data v editoru, nahrajte je do tabulky popř textový formát(například csv) nebo import z cloudu. Dále vyberte, co chcete získat – diagram, graf, mapu – a konečný formát.
Na svůj web můžete vložit interaktivní vizualizaci pomocí prvku iframe a také si stáhnout své diagramy ve formátu pdf nebo gif a vložit je do prezentace.
Startovací tarif je zdarma. Omezení velikosti knihovny, počtu šablon a možnosti stahovat diagramy jako obrázky. Ale tento tarif je více než dostačující pro návrh jednoho malého webu nebo online prezentace. Placené plány začínají na 19 dolarech měsíčně.
Vytvořit
Nástroj pro spolupráce, který umožňuje vytvářet interaktivní diagramy, Ganttovy diagramy a jednoduché infografiky. Arzenál obsahuje více než 50 typů diagramů s tisíci vzorků a dostupnými knihovnami tvarů.
Rozhraní připomíná Microsoft Visio a není divu: Creately plní podobné úkoly.
Výsledky lze importovat na webové stránky, mobilní aplikace a uložit ve formátech PDF a SVG.
Hlavní nevýhoda: všechny verze jsou placené. Online služba - od 5 $ měsíčně. Desktopová verze bude stát 75 dolarů.
Fusiontables
Nástroj Google pro vytváření podrobných tabulek, grafů a map.
Pomáhá shromažďovat a vizualizovat data a zobrazovat je na webových stránkách.
Importujete data ze souboru v počítači (prakticky jakýkoli tabulkový formát), z tabulek Dokumentů Google nebo vytvoříte novou tabulku. Můžete vyhledávat informace z externích zdrojů.
Nevýhody: složité rozhraní, žádné konstrukční prvky.
Klady: Spolupráce, protože všechna data jsou na Disku Google.
Nástroj používá The Guardian, což je již dobré doporučení.
VisualizeFree
Vizualizaci lze exportovat do formátu Excel, PowerPoint a PDF.
Služba je zdarma. Zajímavá funkce: ačkoli můžete při vývoji použít Flash, výsledek lze uložit ve formátu HTML5.
Tableaupublic
Zdarma interaktivní systém vizualizace dat.
Importujete data (podporovány jsou téměř všechny běžné formáty a mnoho služeb) a získáte vizualizaci pro zveřejnění na webu nebo sociálních sítích.
Služba poskytuje 10 GB pro ukládání projektů na svých serverech.
Javascriptové knihovny
Dygraphs
Knihovna s otevřeným zdrojovým kódem pro vytváření diagramů. Pomáhá zkoumat, zpracovávat a interpretovat velké soubory dat. Flexibilní nastavení.
Nevýhoda: Jedná se spíše o nástroj pro vývojáře než o nástroj obchodníka. Jeho funkcí je pouze vytvářet grafy a diagramy. Vyžaduje dovednosti v práci s javascriptem a manuálem. Zde však ani pro začátečníka není nic složitého.
D3.JS
Knihovna pracuje s datově řízenými dokumenty pomocí html, svg a css. Importuje data ze souborů csv.
Je vhodný i pro jednoduché obchodní vizualizace, ale jeho hlavním účelem jsou vědecké informace.
Leták
Zdarma javascriptová knihovna pro vytváření mobilních interaktivních map. Použijte jej, pokud nechcete vkládat Mapy Google a mapy Yandex na svůj web nebo mobilní aplikaci.
Hlavní výhody: knihovna je extrémně lehká a navíc funguje bez připojení k internetu.
Highcharts
Obrovské množství možností a typů grafů. Výstupní formát je SVG nebo VML pro starší verze Internet Exploreru.
Podporuje animaci a datové toky v reálném čase.
Zdarma pro nekomerční projekty.
Chart.js
Open source knihovna. 6 typů diagramů, které více než pokryjí potřeby malého projektu, ale pro profesionála ve statistice nestačí.
Podporuje HTML5 Canvas a vytváří responzivní animované tabulky a grafy ve stylu plochého designu.
jqPlot
Plugin pro vytváření jednoduchých grafů, spojnicových a koláčových grafů.
Snadno integrovatelné do webu. Snadné nastavení, atraktivní design grafu. Podporuje animaci, žádná interaktivita.
Dobré bezplatné řešení pro jednoduché úkoly.
ZingChart
Používá HTML5 Canvas a zároveň podporuje Flash. Pro vizualizaci dat máte k dispozici stovky typů grafů.
Bezplatná verze stačí k vyřešení většiny problémů. Vizualizace jsou podepsány „PoweredbyZingChart“. Nejoblíbenější tarif „SaaS“ bude podle vývojářů stát 1999 $ ročně.
JavaScriptInfoVisToolkit
Modulární struktura. Adaptace pro mobilní zařízení. Uživatel si stáhne pouze to, co je v konkrétním případě potřeba.
K dispozici je sada jedinečných designových stylů a animačních efektů.
Služby pro tvorbu infografiky
Piktogram
Nabízí mnoho bezplatných a prémiových šablon pro infografiku, prezentace, zprávy a zprávy. Všechny vypadají působivě a snadno se používají.
Můžete použít vše, co potřebujete pro atraktivní prezentaci: tabulky, grafy, fotografie, videa, ikony atd. Jednoduchý vestavěný editor: vyberte si jednu ze šesti set hotových šablon, nahrajte své vlastní soubory, přetáhněte objekty na pracovní plochu.
Importujte data z Excelu, Dokumentů Google a online průzkumové služby SurveyMonkey.
Easy.ly
Snadno použitelný nástroj se stovkami šablon. Pokud chcete, začněte od nuly.
Na horním panelu vyberte objekt zájmu (ikony, kliparty, diagramy atd.) a přetáhněte jej na požadované místo. Můžete vložit video.
Startovací tarif je zdarma za další „cookies“ si služba vyžádá 3 $ měsíčně.
Business intelligence a platformy řídicích panelů
Sisense
Umožňuje kombinovat data z více zdrojů a hledat nové nápady prostřednictvím vizualizace. Pouze pro vytváření prezentací není Sisense nejlepší volbou. Pokud si ale potřebujete rychle vytvořit svůj vlastní dashboard s mnoha widgety, tohle je ono.
Vývojáři ujišťují, že i neškolený člověk se s úkolem vyrovná za hodinu a půl.
Krátká bezplatná zkušební doba. Ceny jsou k dispozici na vyžádání.
Nuvi
Služba je placená, tarify jsou určeny konkrétními úkoly. Majitelé tvrdí, že jsou otevření neziskovým projektům a startupům, takže můžete smlouvat.
Bime
Cloudová platforma pro vizualizaci BI analytiky. Přebírá zdrojová data z kontextových reklamních systémů, CRM, systémů webové analýzy, sociálních sítí a dalších zdrojů. Ruské služby bohužel nejsou ihned po vybalení podporovány. Potřebujeme specialisty na integraci IT.
Transformuje data do výkonných vizualizací, které vypadají dobře na jakémkoli displeji, bez ohledu na platformu nebo velikost.
Bezplatné zkušební období po dobu 2 týdnů. Základní sazba je 490 $ měsíčně.
iCharts
Platforma pro vizuální analýzu cloud BI pro podnikání. Sdílený přístup k ovládacímu panelu s widgety v reálném čase. Výsledky lze snadno implementovat, sdílet a prohlížet.
Integrace s Google Analytics, Salesforce, Zendesk, Azure, AmazonAurora, GoogleCloudSQL, GitHub a desítkami dalších služeb.
Platforma je placená, startovací tarif je 460 $ měsíčně.
Ploty
Platforma, která vytváří jak jednotlivé tabulky a grafy, tak i prezentace a plnohodnotné dashboardy.
Pracuje s JavaScript, Python, R, Matlab, Excel. Importujte data z více zdrojů (MySQL, Microsoft SQL Server, Redshift, Excel atd.).
Existuje bezplatná verze. Placený plán - 33 $ měsíčně.
DataHero
Tato cloudová platforma umožňuje plnohodnotnou práci bez využití IT specialistů. Import z cloudových služeb.
Můžete vytvořit samostatné widgety a řídicí panely.
Principy tlačítek a drag-and-drop: není třeba ztrácet čas zvládnutím rozhraní.
Existuje bezplatný plán. Služba poskytuje každému novému uživateli bezplatné zkušební období 2 týdnů s možnostmi prémiového tarifu. Placené plány začínají na 59 dolarech.
Závěr
Většinu rutinních úloh zpracování a vizualizace dat lze samozřejmě řešit staromódním způsobem – v Excelu, Adobe Illustratoru a Power Pointu. Síla moderních technologií nám však umožňuje jít dál i bez specifických znalostí a dovedností.
Všechny služby fungují na jakékoli platformě a v jakémkoli prohlížeči (kromě starších verzí). Nemusíte být IT specialista nebo designér, ani instalovat Javu, Silverlight nebo Flash.
Doufáme, že si pro své úkoly nejen vyberete vizualizační nástroje, ale také se dozvíte něco nového o svých datech.
Pokročilé nástroje pro vizualizaci dat se staly nedílnou součástí firemních platforem BI. Někteří prodejci, jako je Tableau, učinili z vizualizace základní kámen svých analytických systémů. Trend zcela prostupuje trhem analytických systémů: dnes i ty nejjednodušší analytické nástroje pro koncové uživatele často spoléhají na vizuální reprezentaci dat.
Vizualizace velkých dat
Vizuální prezentace výsledků analýz má zásadní význam pro jejich interpretaci. Není žádným tajemstvím, že lidské vnímání je omezené a vědci pokračují ve výzkumu zlepšování moderních metod prezentace dat ve formě obrázků, diagramů nebo animací. Zdálo by se, že zde nelze přijít s něčím novým, ale ve skutečnosti tomu tak není. Pro ilustraci uvádíme několik pokročilých metod vizualizace, které se rozšířily relativně nedávno.
- Tag Cloud
Každému prvku v oblaku značek je přiřazena specifická váha, která koreluje s velikostí písma. V případě textové analýzy hodnota váhového koeficientu přímo závisí na četnosti použití (citace) určitého slova nebo fráze. Umožňuje čtenáři rychle získat představu o klíčových bodech jakéhokoli velkého textu nebo sady textů.
- Clustergram
Metoda vizualizace používaná při shlukové analýze. Ukazuje, jak se jednotlivé prvky datové sady vztahují ke shlukům, když se mění jejich počet. Výběr optimálního počtu shluků je důležitou součástí shlukové analýzy.
- Historický proud
Pomáhá sledovat vývoj dokumentu, na kterém současně pracuje velké množství autorů. Toto je zejména typická situace pro wiki služby a také web tadviser. Na vodorovné ose je vynesen čas a na svislé ose příspěvek každého spoluautora, tzn. objem zadávaného textu. Každému jedinečnému autorovi je v grafu přiřazena specifická barva. Níže uvedená tabulka je výsledkem analýzy slova „islám“ na Wikipedii. Je jasně vidět, jak aktivita autorů postupem času vzrostla.
- Prostorové proudění
Tento diagram umožňuje sledovat prostorové rozložení informací. Vzorový graf byl vytvořen pomocí služby New York Talk Exchange. Vizualizuje intenzitu výměny IP provozu mezi New Yorkem a dalšími městy po celém světě. Čím jasnější je čára, tím více dat se přenese za jednotku času. Je tak snadné a není obtížné identifikovat regiony nejblíže New Yorku v kontextu výměny informací.
Zpracování operačních databází a vícerozměrných úložišť
- Transakční databáze s velkým zatížením
- Relační a vícerozměrné úložiště
- Přímá volání systémových rozhraní API
- Práce s konektory
- Zpracování plochých souborů (CSV, Excel, XML atd.)
Budování analytických modelů v paměti
4.1. Audio rozšíření vizuální analýzy
Jednou z moderních účinných metod analýzy různých vědeckých dat je metoda jejich počítačové vizualizace - metoda vědecké vizualizace.
Řešení problémů analýzy vědeckých dat pomocí metody vědecké vizualizace spočívá v:
- Při získávání reprezentace analyzovaných dat ve formě nějakého grafického obrázku (úkolem vizualizace zdrojových dat). Pro získání takového grafického obrazu je nutné přidružit data k prostorové scéně (souboru prostorových objektů), přesněji k jejím geometrickým a optickým (texturním) popisům (modelům), a následně získat grafický obraz této prostorová scéna (rendering), kterou lze zobrazit na monitoru, tiskárně a dalších výstupních zařízeních pro následnou analýzu.
- Při vizuální analýze výsledného grafického obrazu analyzovaných dat. V tomto případě jsou výsledky analýzy interpretovány ve vztahu k původním datům. Tento úkol řeší přímo uživatel sám. Vizuální analýzou grafického obrazu rozumíme vizuální analýzu zmíněné prostorové scény. Člověk si může udělat úsudek o relativní poloze prostorových objektů, jejich tvaru a struktuře.
Rýže. 4.1. Zvukově vylepšená vědecká vizualizační metoda.
Zvažme možnost připojení dalšího smyslového orgánu - orgánu sluchu - v procesu vizuální analýzy. Aby bylo možné analyzovat zdrojová data pomocí zvuku, je tedy nutné:
- Přijímejte reprezentace analyzovaných dat ve formě nějakého zvukového zobrazení. Pro získání takového zobrazení je nutné doplnit geometrický a optický popis prostorové scény o její zvukový popis a takovou zvukovou prostorovou scénu uvést do souladu s původními daty a následně získat zvukovou reprezentaci této prostorové scény ( vykreslování zvuku), které lze odeslat do reproduktorů a dalších výstupních zařízení pro následnou analýzu.
- Analyzujte zobrazení zvuku a interpretujte výsledky analýzy ve vztahu k původním datům.
Je důležité poznamenat, že když je audio displej i grafický obrázek přizpůsobeny původním datům pro následnou analýzu, proces analýzy je často efektivnější.
Obrázek 4.1 ukazuje blokové schéma pokročilého vizualizačního algoritmu, tzn. společné získání grafického obrazu a zvukového zobrazení zdrojových dat.
Rýže. 4.2. Blokové schéma pokročilého vědeckého vizualizačního algoritmu.
Takový algoritmus je implementován pomocí počítače napsáním vizualizačního aplikačního programu v nějakém vstupním programovacím jazyce použitého nástroje (souboru nástrojů) ve formě určitého softwarového produktu nebo sady softwarových produktů.
Podívejme se na hlavní charakteristiky metody rozšířené vědecké vizualizace ve vztahu k určité třídě problémů analýzy vědeckých dat, kdy se jako taková data používají popisy určitých skalárních polí.
4.2. Zvukově vylepšená vizuální analýza skalárních polí.
Počáteční údaje
Tato data jsou popisem skalárního pole na nějakém obdélníkovém oddělení trojrozměrného fyzického prostoru, prezentovaného v souboru. Pro popis je použit matematický model skalárního pole ve formě hodnot funkce 3 proměnných tvaru F(x,y,z) v uzlech dané trojrozměrné obdélníkové sítě.
Filtrovaná data
Interpolační funkce f(x,y,z) se používá jako filtrovaná data s použitím hodnot původní funkce v uzlech mřížky. Pro získání funkce f(x,y,z) specifikované na uvažovaném definičním oboru (rovnoběžník) jsme použili trilineární interpolaci.
Popis prostorové scény
Tento popis obsahuje 3 komponenty:
- Popis izoplochy funkce f(x,y,z) ve tvaru: f(x,y,z)=с, přičemž společně přijímané hodnoty x,y,z patří do výše uvedené oblasti definice funkce f(x,y,z) ac je uživatelem specifikované reálné číslo odpovídající určité hodnotě analyzovaného skalárního pole.
Tato izoplocha je první složkou prostorové scény, o které se uvažuje. - Optický popis, tzn. popis texturního povlaku uvedeného izopovrchu, specifikovaný uživatelem.
- Popis zvuku, tzn. popis uvažovaného bodového zdroje zvuku. Jeho umístění (hodnoty souřadnic x0,y0,z0) je určeno uživatelem a frekvence odchozího zvuku w souvisí s hodnotou funkce f(x,y,z) takto: w = k* f(x0,y0,z0), kde hodnotu koeficientu k zadává uživatel.
Tento bodový zdroj zvuku je 2. komponentou prostorové scény, o které se uvažuje.
Grafické zobrazení obrazu a zvuku prostorové scény
Výsledky renderování jsou v tomto pořadí:
- promítání grafického obrazu izoplochy na použitý grafický terminál,
- zvuková vlna generovaná použitým audio terminálem.
Mělo by být upřesněno, že frekvence zvukové vlny je uživatelem vnímána jako tón zvuku.
