Mittaustiedon käsittely ja analytiikka energia-alalla
Saapuvan mittausdatan käsittelyä ja tallentamista pitkäaikaisesti Azuren palveluilla
Tässä tapauksessa käsitellään Azuressa integraatioalustan kautta saapuvaa mittausdataa, energia-alalla on pitkään käytetty SAF - nimistä formaattia tiedonvaihtoon kun eräsiirroista on kyse. Tiedostoformaattia käytetään sähkön siirron, sähkön vähittäismyynnin ja kaasun liiketoiminta-alueilla.
Millaisia komponentteja tarvitaan mittausdatan käsittelyyn Azuressa sijaitsevalla data-alustalla?
Ratkaisu kokonaisuutena
Ratkaisu muodostaa oman Azuren landing zone - hallintaryhmän alla olevan kokonaisuuden, tyypillistä on että on useampia eri Azuren tilauksia joihin ympäristöt (dev, test, qa, uat, prod) sijoittuvat omina resurssiryhminään.
Yleensä vaatimuksena on että on jonkinlainen resurssi jonne ulkoiset palvelut voivat tuottaa dataa ja toisaalta kokonaisuuden sisäinen datankäsittely on tiukemmin rajoitettu tapahtuvaksi omassa verkkokonaisuudessaan.
Luonnollisesti sovellettava Azuren hallintamalli pilvipalveluiden kehittämisessä asettaa täsmälliset vaatimukset toiminnalle.
Virtuaaliverkko ja aliverkot
Jokaisessa ympäristössä on oma virtuaaliverkko ja aliverkot segmentoimassa kokonaisuutta, osa palveluista tuodaan suoraan virtuaaliverkon sisälle ja toisaalla voidaan dedikoida joku aliverkko suoraan tietylle palvelulle. Osa Azuren palveluista on luoteeltaan sellaisia että niiden osalta käytetään virtuaaliverkon aliverkkojen service endpoint tai private endpoint - konfiguraatioita, private endpoint mahdollistaa tavallaan vaikka loogisen tietokantapalvelimen tuonnin tietyn aliverkon sisälle. Osa palveluista voi olla sellaisia että riittää vaikkapa service endpointin käyttäminen.
Mittausdatan käsittely
Mittausdata saapuu tiedostoina integraatioalustan kautta, saapuvat tiedostot laukaisevat Azure Functions - resursseihin perustuvia käsittelyitä ja tiedon tallennuksia, nämä funktiot on tuotu niiden yläpuolella olevan App Service Premiumin Planin avulla virtuaaliverkon sisälle jolloin ne voivat kommunikoida esimerkiksi tietokannan kanssa joka ei ole avattu julkiseen internettiin.
Mittausdatan pitkäaikaistallennus
Mittausdataa voidaan tallentaa joissain tapauksissa tietokantaan taikka sitten voidaan hyödyntää erikoistuneempia aikasarja-datan käsittelyyn optimoituja ratkaisuja.
Erilaiset hybridikäyttötapaukset sekä toisaalta suuren volyymin aikasarjatapaukset voivat olla haastavia perinteisten tietokantamoottorien avulla toteutettuina. Esimerkiksi jos olisi vaikkapa 3,5 miljoonaa kohdetta jotka generoisivat neljä kertaa tunnissa dataa niin rivien kokonaismäärä vuoden aikana olisi 122,6 miljardia riviä ilman että mitään muutoksia olisi vielä edes huomioitu.
Puhtaamman PaaS - tyyppisen aikasarjojen tallennusmoottorin voisi integroida tähän kokonaisuuteen esimerkiksi niin jos se tukisi service endpoint - tyyppistä tapaa kommunikoida aliverkkoon sijoitetun datan käsittelymoottorin kanssa.
Kustannusten muodostuminen
Tässä esimerkissä kustannuksia alkaa muodostua paljolti valittuu suorituskykytasoon suhteutettuna, kustannukset ovat vain osittain transaktiomääriin ja käsiteltyyn datamäärään perustuvia. Kustannusten muodostumista on seurattava ja reagoitava, pilvipalveluiden luonne on enemmän tuottavuuden ja time to market - puolen mahdollistamisessa kuin tiukasti kustannustehokkuudessa unit economics - mielessä.
Pilvipalveluiden hyödyntämisessä on hyvä käyttää jonkinlaista viitekehystä, esimerkiksi Microsoftin Cloud Adoption Framework for Azurea.
Katso mielenkiintoinen referenssimme energia-alalta jossa hyödynnettiin tällaisia palveluita mittausdatan käsittelyssä!
Lisätietoja
Tagit
Liiketoimintaprosessi
BI ja raportointi |
Erikoisosaaminen
Ohjelmistokehitys | |
Analytiikka | |
Arkkitehtuuri | |
Integraatiot | |
Pilvipalvelut / SaaS |
Toimialakokemus
Raaka-aineet ja energia |
Teknologia
Azure | |
Microsoft | |
Python |
Tarjonnan tyyppi
Konsultointi | |
Toteutustyö |
Ready Solutions - Asiantuntijat ja yhteyshenkilöt
Ready Solutions - Muita referenssejä
Ready Solutions - Muita bloggauksia
It- ja ohjelmistoalan työpaikat
- Laura - DevOps Engineer
- Laura - Senior ohjelmistokehittäjä
- Laura - Product Designer, Game Development Tools & UX
- Nordea - Technology Business Risk Manager
- Nordea - Senior IT Analyst in SWIFT area
- Frends iPaaS - Global Digital Marketing Manager | 4.5K-5.3K€/month
- Laura - Senior developer
Premium-asiakkaiden viimeisimmät referenssit
- TNNet Oy - TNNet on huomaamaton taustavoima JYP:in takana
- TNNet Oy - TNNet tuntee Viherlandian IT-infran 20 vuoden ajalta
- Nodeon - Ratikka luo kasvua Vantaalle
- Sulava Oy - Business Finland: Tavoitteena puhdas Azure-pohjainen pilviympäristö
- Wunder - Metsanhoidonsuositukset.fi – onnistunut digiloikka painetuista oppaista innovatiivisiiin rajapintaratkaisuihin
- Wunder - Tikkurila – Sirpaleisesta saumattomaan digiin
- Wunder - Ara uudisti sivustonsa yhdessä Wunderin kanssa
Tapahtumat & webinaarit
- 20.09.2024 - AamuAreena 20.9.2024: Data-avaruudet ja niiden hyödyntäminen
- 26.09.2024 - Green ICT -osaaminen tulevaisuudessa – mitä tietoja ja taitoja tarvitsemme? Green ICT -ekosysteemitapaaminen 26.9.
- 10.10.2024 - Palvelumuotoilu johtamisessa ja transformaatiossa
- 10.10.2024 - Miten tekoäly mullistaa digitaalisen asiakaskokemuksen?
- 30.10.2024 - Nordic NetSuite Summit 2024
- 19.11.2024 - The Future of Software - Embracing Collaboration in an AI-Powered World
Premium-asiakkaiden viimeisimmät bloggaukset
- Timeless Technology - ControlByWeb® Quick-Connect Sensor™, X-QCS-T, lämpötilan valvontaratkaisu palvelinhuoneisiin ja datakeskuksiin.
- Codemate - Codemate ja Upsert yhdistyvät saman brändin alle
- Codemate - Delivery Lead Mikael Komu ei ole miettinyt työpaikan vaihtoa 14 vuoteen
- Timeless Technology - Uusia Perle Systems IOLAN SCR Secure OOBM konsolipalvelimia jopa 56 konsoliportilla.
- TNNet Oy - NIS 2 - Mitä on odotettavissa?
- TietoPiiri Oy - Tietopiiri Oy ja järjestön varainhankinnan osaaminen
- Maxtech - Aluerajoitettu työaikakirjaus tekee työajanseurannasta hallittavampaa
Digitalisaatio & innovaatiot blogimediaBlogimediamme käsittelee tulevaisuuden liiketoimintaa, digitaalisia innovaatioita ja internet-ajan ilmiöitä |