Mittaustiedon käsittely ja analytiikka energia-alalla
Saapuvan mittausdatan käsittelyä ja tallentamista pitkäaikaisesti Azuren palveluilla
Tässä tapauksessa käsitellään Azuressa integraatioalustan kautta saapuvaa mittausdataa, energia-alalla on pitkään käytetty SAF - nimistä formaattia tiedonvaihtoon kun eräsiirroista on kyse. Tiedostoformaattia käytetään sähkön siirron, sähkön vähittäismyynnin ja kaasun liiketoiminta-alueilla.
Millaisia komponentteja tarvitaan mittausdatan käsittelyyn Azuressa sijaitsevalla data-alustalla?
Ratkaisu kokonaisuutena
Ratkaisu muodostaa oman Azuren landing zone - hallintaryhmän alla olevan kokonaisuuden, tyypillistä on että on useampia eri Azuren tilauksia joihin ympäristöt (dev, test, qa, uat, prod) sijoittuvat omina resurssiryhminään.
Yleensä vaatimuksena on että on jonkinlainen resurssi jonne ulkoiset palvelut voivat tuottaa dataa ja toisaalta kokonaisuuden sisäinen datankäsittely on tiukemmin rajoitettu tapahtuvaksi omassa verkkokonaisuudessaan.
Luonnollisesti sovellettava Azuren hallintamalli pilvipalveluiden kehittämisessä asettaa täsmälliset vaatimukset toiminnalle.
Virtuaaliverkko ja aliverkot
Jokaisessa ympäristössä on oma virtuaaliverkko ja aliverkot segmentoimassa kokonaisuutta, osa palveluista tuodaan suoraan virtuaaliverkon sisälle ja toisaalla voidaan dedikoida joku aliverkko suoraan tietylle palvelulle. Osa Azuren palveluista on luoteeltaan sellaisia että niiden osalta käytetään virtuaaliverkon aliverkkojen service endpoint tai private endpoint - konfiguraatioita, private endpoint mahdollistaa tavallaan vaikka loogisen tietokantapalvelimen tuonnin tietyn aliverkon sisälle. Osa palveluista voi olla sellaisia että riittää vaikkapa service endpointin käyttäminen.
Mittausdatan käsittely
Mittausdata saapuu tiedostoina integraatioalustan kautta, saapuvat tiedostot laukaisevat Azure Functions - resursseihin perustuvia käsittelyitä ja tiedon tallennuksia, nämä funktiot on tuotu niiden yläpuolella olevan App Service Premiumin Planin avulla virtuaaliverkon sisälle jolloin ne voivat kommunikoida esimerkiksi tietokannan kanssa joka ei ole avattu julkiseen internettiin.
Mittausdatan pitkäaikaistallennus
Mittausdataa voidaan tallentaa joissain tapauksissa tietokantaan taikka sitten voidaan hyödyntää erikoistuneempia aikasarja-datan käsittelyyn optimoituja ratkaisuja.
Erilaiset hybridikäyttötapaukset sekä toisaalta suuren volyymin aikasarjatapaukset voivat olla haastavia perinteisten tietokantamoottorien avulla toteutettuina. Esimerkiksi jos olisi vaikkapa 3,5 miljoonaa kohdetta jotka generoisivat neljä kertaa tunnissa dataa niin rivien kokonaismäärä vuoden aikana olisi 122,6 miljardia riviä ilman että mitään muutoksia olisi vielä edes huomioitu.
Puhtaamman PaaS - tyyppisen aikasarjojen tallennusmoottorin voisi integroida tähän kokonaisuuteen esimerkiksi niin jos se tukisi service endpoint - tyyppistä tapaa kommunikoida aliverkkoon sijoitetun datan käsittelymoottorin kanssa.
Kustannusten muodostuminen
Tässä esimerkissä kustannuksia alkaa muodostua paljolti valittuu suorituskykytasoon suhteutettuna, kustannukset ovat vain osittain transaktiomääriin ja käsiteltyyn datamäärään perustuvia. Kustannusten muodostumista on seurattava ja reagoitava, pilvipalveluiden luonne on enemmän tuottavuuden ja time to market - puolen mahdollistamisessa kuin tiukasti kustannustehokkuudessa unit economics - mielessä.
Pilvipalveluiden hyödyntämisessä on hyvä käyttää jonkinlaista viitekehystä, esimerkiksi Microsoftin Cloud Adoption Framework for Azurea.
Katso mielenkiintoinen referenssimme energia-alalta jossa hyödynnettiin tällaisia palveluita mittausdatan käsittelyssä!
Lisätietoja
Tagit
Liiketoimintaprosessi
BI ja raportointi |
Erikoisosaaminen
Ohjelmistokehitys | |
Analytiikka | |
Arkkitehtuuri | |
Integraatiot | |
Pilvipalvelut / SaaS |
Toimialakokemus
Raaka-aineet ja energia |
Teknologia
Azure | |
Microsoft | |
Python |
Tarjonnan tyyppi
Konsultointi | |
Toteutustyö |
Ready Solutions - Asiantuntijat ja yhteyshenkilöt
Ready Solutions - Muita referenssejä
Ready Solutions - Muita bloggauksia
It- ja ohjelmistoalan työpaikat
- Laura - Cloud Engineer
- Laura - UX/UI Designer
- Laura - Solution Architect
- Laura - Scrum Master
- Laura - Ohjelmistotestaaja
- Nordea - Senior IT Analyst, Cards domain, Nordea Payments
- Laura - Product Owner
Premium-asiakkaiden viimeisimmät referenssit
- Codemate - Digitaalisen murroksen nopeuttaminen Flutterin avulla
- Codemate - Nucu-sovelluksen käyttäjäkokemuksen muotoilu
- TNNet Oy - Aksulit Oy – TNNet osoittautui parhaaksi palvelinkumppaniksi
- SD Worx - Säästöjä, sujuvuutta ja varmuutta pilvipalveluiden avulla
- SD Worx - Stella hankki tarpeitansa vastaavan palkkajärjestelmän – nyt säästyy monta työpäivää kuukaudessa
- Vetonaula Oy - Vetonaula HTJ:n liiketoiminnan kasvun mahdollistajana
- SD Worx - LUMENE ja SD Worx yhteistyössä jo yli 10 vuotta
Tapahtumat & webinaarit
- 19.11.2024 - The Future of Software - Embracing Collaboration in an AI-Powered World
- 19.11.2024 - Tehokkuutta ja säästöjä low-code-ratkaisuilla
- 27.11.2024 - Green ICT -ekosysteemitapaaminen III: Ohjelmistojärjestelmien virrankulutuksen mittaaminen ja kasvihuonepäästöjen arviointi
- 27.11.2024 - Digitaalisen asiakaskokemuksen uusi aikakausi
- 28.11.2024 - Copilot-webinaari – Mielekkäämpää tietotyötä turvallisesti
- 05.12.2024 - Green ICT VICTIS -hankkeen kick off -tilaisuus
- 15.01.2025 - Datavastuullisuuden valmennus: hanki valmiudet vastuulliseen datan ja tekoälyn hyödyntämiseen
Premium-asiakkaiden viimeisimmät bloggaukset
- Innofactor Oyj - 5 huomiota Microsoft Digital Defense Report 2024 -julkaisusta
- TNNet Oy - Ethän lepsuile sähköpostin suojauksessa – Sipulisuojaus kuntoon!
- TNNet Oy - Mitä TNNet tarjoaa pilvipalvelukumppanina?
- TNNet Oy - Tietoturvavalvonta SOC – Kansainvälinen tiimi havainnoi ja reagoi TNNetin kanssa 24/7
- ICT Elmo Oy - Mitä on IT-palvelunhallinta
- ICT Elmo Oy - Mitä on IT-palvelunhallinta
- Hion Digital Oy - Ostajan muistilista: Mitä ottaa huomioon ennen verkkosivuston uudistamista?
Digitalisaatio & innovaatiot blogimediaBlogimediamme käsittelee tulevaisuuden liiketoimintaa, digitaalisia innovaatioita ja internet-ajan ilmiöitä |