Author Archives: admin

Šiek tiek apie DevOps

DevOps – dažnai eskaluojama tema šių dienų IT rinkoje. 2016 metų pabaigoje, msts2016 konferencijoje, šia tema Donavan Brown pateikė trumpą ir nuotaikingą pranešimą. Kaip Microsoft keičia požiūrį ir juda link DevOps detaliau žr.video:

Gartner skelbia analitinių ir BI platformų kvadrantus

Gartner kaip ir kiekvienais metais skelbia visų IT sričių stipriausias rinkos dalyves. Kaip ir praeitais metais analitinių ir BI platformų viena iš lyderių paskelbta Microsoft. Neabejotinai šios rezultatus lėmė tokių produktų, kaip Power BI, SSRS, Sharepoint spartus vystymas. Su rezultatais galite susipažinti: https://blogs.microsoft.com/blog/2017/02/16/microsoft-breaks-gartner-magic-quadrant-business-intelligence-analytics-platforms/#sm.0000hhcaseanxd1ns0k1gpyn3gceb

Power BI ir Sharepoint suderinamumas

Microsoft kompanija dar sykį įrodė, kad Power BI – prioritetinis produktas. Nuo šio Sharepoint Online palaikys tinklo dalies priedus (angl. webpart), kurie galės tiesiogiai referuoti ir Power BI Online esančias ataskaitas. Tam tereikia nukopijuoti ataskaitos url adresą. Vertėtų paminėti, kad iš Power BI dalies reikalaujamos „pro“ tipo licenzijų. Daugiau skaitykite: https://powerbi.microsoft.com/en-us/blog/integrate-power-bi-reports-in-sharepoint-online/

Power BI vėl stebina

Power BI eilinį kartą teigiamai nustebino self-service BI priemonių rinką. Microsoft pristatė funkcionalumą, kuriuo Power BI nuo šiol lengvai suderinamas su SQL Server Reporting Services (toliau – SSRS), t.y. nuo šio savo Power BI ataskaitas galima bus talpinti ne tik Microsoft Power BI Cloud aplinkoje, bet ir savo lokalioje sistemoje. Dar viena naujiena, jog SSRS galima įsidiegti atskirai be SQL Serverio, tiesa, reikia paminėti, kad Power BI suderinta versija su SSRS kolkas palaiko vienintelį duomenų šaltinį – SQL Server Analysis Services (toliau – SSAS). Šie įrankiai pasiekiami „technical preview“ pagrindu, todėl galima neabejoti, jog galutinėje produkto versijoje bus palaikoma daugiau duomenų šaltinių ir funkcionalumas bus išplėstas.

Technical preview versiją tiek SSRS, tiek suderinto Power BI galite atsisiųsti iš: https://www.microsoft.com/en-us/download/details.aspx?id=54610

Detaliau skaitykite: https://msdn.microsoft.com/en-us/library/mt793257.aspx

Archyvavimas Big Data sprendimuose

Didžiųjų duomenų (angl. Big Data) terminas ne veltui pradedami žodžių „didieji“. Visi tokio pobūdžio sprendimai užima didelius duomenų kiekius ir net vietos kietajame diske netaupančioms organizacijoms tenka pasvarstyti, kaip šią vieta optimuozuoti. Tam dažnai naudojami archyvavimo mechamizmai. Egzistuoja daugybė pasiūlymų, kaip realizuoti archyvavimą didiesiems duomenims, bet efektyviausi įvardinami keli:

  • snappy
  • LZO
  • LZF
  • gzip

Šališkus testus galite detaliau pasinagrinėti: http://blog.erdemagaoglu.com/post/4605524309/lzo-vs-snappy-vs-lzf-vs-zlib-a-comparison-of

Prieš atliekant archyvavimą, būtina įsitikinti kuris iš šių algoritmų labiau tinkamas realizuoti ne tik duomenų įrašymui, bet ir nuskaitymui. Dažnu atveju tai priklauso nuo pasirinktos programinės įrangos.

Big Data duomenų formatai. Kurį pasirinkti?

Big Data sprendimų populiarumas vis didėja, todėl nenuostabu, kad atsiranda su tuo susijusių problemų. Viena iš esminių, kurį duomenų formatą pasirinkti duomenų importavimui į Hadoop infrastruktūrą? Paprasčiausi bandymai visada pradedami text (csv) formatu arba reliaciniu pagrindu sukurtų lentelių struktūra, kaip Hive arba Parquet. Kodėl verta pamąstyti ir apie kitas galimybes, pavyzdžiui avro formatą?

Avro formatas palaiko schemos istoriškumą, kadangi jis yra organizuotas Json struktūros pagalba. Tai leidžia koreguoti esamą struktūrą, o ne tik atlikti esamos struktūros papildymą pradinių duomenų pasikeitimų atveju. Šis formatas puikiai archyvuojamas ir išskaidomas.

 

Detaliau apie formatų palygnimus įskaitant greitaveikos vertinimus skaitykite: http://www.slideshare.net/StampedeCon/choosing-an-hdfs-data-storage-format-avro-vs-parquet-and-more-stampedecon-2015

Cortana Intelligence Suite

Visai nesenai įvykusioje Microsoft Ignite konferencijoje dar sykį eskaluota Power BI ir viso Contana Intelligence Suite svarba. Buvo pademonstruota prezentacija, su demo dalimi, kurioje aptariamos visos analitinės Cortana Intelligence Suite galimybės įskaitant  Power BI, Datazen reports ir on-premise reporting, Machine Learning, SQL Server ir t.t. Prezentacija, kurią būtina pamatyti:

JIRA ir Power BI sąsaja

Power BI service (debesijos technologijos) turės galimybę integruoti duomenis su viena iš populiariausių klaidų registravimo, darbo apskaitos ir projektų valdymo priemonių JIRA. Integracinė sąsaja realizuota per web duomenų prieigą, t.y. duomenų gavybai prireiks pateikti JIRA url ir prisijungimo duomenis. Atlikus visą tai, suteikiamos puikios produktyvumo analizės galimybės ir t.t. Detaliau skaitykite: https://powerbi.microsoft.com/en-us/blog/explore-your-jira-data-with-power-bi/

Panaudotas paveikslėlis iš Power BI Blog Microsoft puslapio

Panaudotas paveikslėlis iš Power BI Blog Microsoft puslapio