Siirry pääsisältöön
Managed Service Azure Databricksille ja Microsoft Fabricille

Azure
Data Foundation

Azure Data Foundationin key visual

Agentti on valmis, data ei vielä. Rakennamme alustan, josta agenttinne saavat vastauksensa, koodina teidän tenanttiinne, ja ylläpidämme sitä glueckkanja AG:n Managed Servicenä samalla standardilla kuin Azure Foundation ja AI Foundation.

Azure Data Foundationin key visual
Ikoni matkaoppaasta, jonka kannessa lukee Don't Panic

Vastaus on 42

Eräs valmistaja tuli luoksemme AI-pohjaisen myyntisovelluksen kanssa. Käyttötapaus oli päätetty ja budjetti hyväksytty, ja agentin piti vastata katteita ja toimitusaikoja koskeviin kysymyksiin yrityksen omista luvuista. Ensimmäinen workshop päättyi dataplatformiin. Tapaus ei ole ainoa laatuaan, vaan tämän vuoden kaava: vuonna 2024 yritykset kysyivät dataplatformia raporttien rakentamiseen, vuonna 2026 ne kysyvät sitä, koska haluavat AI:ta, ja lähes jokainen meille tuleva käyttötapaus alkaa datakysymyksellä. Douglas Adams ennakoi tämän hetken jo vuonna 1979, kun tietokone laski seitsemän ja puoli miljoonaa vuotta, julisti vastaukseksi 42 ja vasta sitten huomattiin, ettei kukaan tiennyt tarkalleen, mikä kysymys oli. Yrityksessä asetelma on päinvastainen. Kysymys on täsmällinen, mutta kukaan ei tiedä, mistä taulusta vastauksen pitäisi tulla, tarkoittavatko controlling ja myynti katteella samaa asiaa ja kuka sen ylipäätään saa nähdä. Harvoin syy on mallissa, lähes aina sen alla olevassa alustassa, ja juuri sen me rakennamme ja sitä me ylläpidämme.

63 %

yrityksistä ei ole AI:lle sopivia datanhallinnan käytäntöjä, tai ne eivät tiedä, onko.

Gartner, kysely 1 203 datanhallinnasta vastaavalle, helmikuu 2025
60 %

AI-projekteista, joilta puuttuu AI:lle kelpaava data, hylätään ennusteen mukaan vuoden 2026 loppuun mennessä.

Gartner, helmikuu 2025
80 %

data- ja analytiikkagovernancen hankkeista epäonnistuu vuoteen 2027 mennessä, koska mikään konkreettinen tarve ei kannattele niitä.

Gartner, ennuste helmikuulta 2024
12 kuukautta

on enintään kahden alustanne foundation-päivityksen välillä, ja siinä välissä pidämme alustan jatkuvasti ajan tasalla.

Managed Azure Data Foundationin evergreen-malli

Neljä ilmeistä oikotietä

Aikapaineessa valitaan lyhin reitti, ja datalle niitä on neljä. Jokaiselle on kunniallinen perustelu, mutta yksikään ei kanna ensimmäistä käyttötapausta pidemmälle.

Ikoni näytöstä, jossa on varoituskolmio, ja sen vieressä robottikäsi

”Kaikkihan se on Excelissä.”

Jokainen osasto ylläpitää omaa totuuttaan, ja jokainen niistä on sisäisesti johdonmukainen. Agentti, joka lukee ne kaikki, toistaa jokaisen totuuden samalla varmuudella.

”Rakennetaan se itse.”

Se onnistuu niin kauan kuin ne kaksi ihmistä pysyvät talossa, jotka tietävät, miten se on rakennettu. Työmarkkinat ovat kuitenkin huomattavan taitavia houkuttelemaan pois data engineerejä, joilla on kokemusta ylläpidosta ja governancesta.

”Ensin lisenssi, sitten katsotaan.”

Fabric-kapasiteetin tai Databricks-workspacen saa tilattua tunnissa. Katalogi, käyttöoikeudet ja verkko eivät synny siitä itsestään, vaan ne joko rakennetaan tai ne puuttuvat.

”Teetetään se kerran.”

Alusta hyväksytään ja luovutetaan, ja hyväksyntäpäivästä alkaen se vanhenee. Databricks ja Microsoft tuovat jatkuvasti uusia runtimeja ja ominaisuuksia, hyväksyntäpöytäkirja ei.

Kaikki neljä kohtelevat dataplatformia hankintana. Me kohtelemme sitä ylläpitona: Azure Data Foundation on versioitu alusta, jonka rakennamme teidän tenanttiinne, jota kehitämme jokaisella releasella ja jota ylläpidämme niin kauan kuin tarvitsette sitä.

Raakadatasta luotettavaan vastaukseen

Azure Data Foundationissa data kulkee kolmen kerroksen läpi, jotka on nimetty olympiamitalien mukaan, vaikka yksikään niistä ei ole lohdutuspalkinto. Bronze ottaa datan lähteistänne vastaan muuttamattomana, Silver puhdistaa ja yhtenäistää sen, ja Gold toimittaa sen liiketoiminnan mukaan mallinnettuna Power BI:lle, data sciencelle ja agenteillenne. Niiden yläpuolella on katalogi, joka tietää jokaisesta taulusta, mistä se tulee ja kuka sen saa nähdä, ja alla perusta, jonka toimitamme koodina.

KatalogiUnity Catalog tai Microsoft Purview, jokaiselle taululle lineage, luokittelu ja käyttöoikeudet
  1. LähteetERP, CRM, liiketoimintasovellukset, tiedostot ja oman konesalin järjestelmät
  2. BronzeRaakadataOtetaan vastaan muuttamattomana ja täydellisenä, jotta jokainen myöhempi luku voidaan jäljittää alkuperäänsä.
  3. SilverPuhdistettuKaksoiskappaleet poistettu, formaatit yhtenäistetty, laatu tarkistettu.
  4. GoldLiiketoiminnan mukaan mallinnettuYksi määritelmä kullekin tunnusluvulle, sovittuna niistä vastaavien liiketoimintayksiköiden kanssa.
  5. KäyttöPower BI, data science ja agentit niillä oikeuksilla, jotka katalogi myöntää
Perusta koodinaVerkko, identiteetti ja policyt Azure Foundationin standardin mukaan, kokonaan kuvattuna OpenTofulla ja Terragruntilla ja poikkeamien varalta tarkistettuna joka viikko

Kuusi rakennuspalikkaa, kolme blueprintiä, yksi standardi

Sen, mikä työkalu teille sopii, ratkaisevat tiiminne ja niiden osaaminen, emme me. Se, miten alusta rakennetaan, suojataan ja miten sitä ylläpidetään, on sen sijaan vakio riippumatta siitä, minkä kolmesta blueprintistä valitsette.
Ikoni henkilökortista, jossa on kuva, ja sen edessä lukko

Agentti näkee sen, minkä te näette, eikä mitään sen yli

Viimeistään ensimmäisen agentin myötä järjestyskysymyksestä tulee vastuukysymys. Agentti, joka tiivistää palkkatietoja, koska ne sattuivat olemaan jaetussa taulussa, ei erehdy, vaan tekee sen, mitä käyttöoikeudet sille sallivat. Azure Data Foundationissa Microsoft Entra ID on identity provider, katalogi tuntee jokaisen taulun alkuperän, luokittelun ja oikeutetut käyttäjät, ja oikeudet ovat voimassa katalogin, skeeman ja taulun tasolla. Agentit, kuten Fabric data agent tai Genie Agent Azure Databricksissa, tekevät kyselynsä käyttäjän identiteetillä ja näkevät siksi täsmälleen sen, minkä se ihminen saa nähdä, jonka puolesta ne toimivat. Tämä ei ole ominaisuus, joka ostetaan myöhemmin lisänä, vaan edellytys kaikelle, mitä AI Foundation rakentaa sen päälle.

Mikä teillä muuttuu

Tähti, jossa on etiketti

Yksi tunnusluku, yksi määritelmä

Gold-kerros pitää jokaisen tunnusluvun täsmälleen kerran. Controlling, myynti ja agentti laskevat samalla luvulla ja kiistelevät jatkossa sen merkityksestä, eivät enää sen alkuperästä.

Dokumentti, jossa on lukko

Oikeudet, jotka kulkevat datan mukana

Käyttöoikeudet on sidottu dataan, ei sovellukseen. Oli kyse Power BI:stä, notebookista tai agentista, voimassa on se, mitä katalogi kyseiselle käyttäjälle määrittää.

Rakennuspalikka, joka haarautuu kolmeksi samanlaiseksi muunnelmaksi

Toistettava eikä kertaluonteinen

Alusta syntyy koodista, ja sen voi milloin tahansa rakentaa uudelleen samasta koodista. Jokainen muutos on versioitu ja jäljitettävissä diffinä, myös sisäiselle tarkastuksellenne.

Pilvi, jossa on kolikko

Yksi hinta per Data Environment

Laskutus perustuu Data Environment -yksiköihin eli alustan itsenäisesti ylläpidettyihin instansseihin, ei henkilötyöpäiviin. Ylläpidon hinta on tiedossa ennen kuin ylläpito alkaa.

Mitä me ylläpidämme ja mikä jää teille

Managed Service on juuri niin hyvä kuin sen rajaus. Siksi sanomme yhtä selvästi, mitä otamme hoitaaksemme ja mikä jää teille, ja molemmat mahtuvat kolmelle tasolle.

Käyttötapaukset ja liiketoimintalogiikkaTe, meidän enablement-tuellamme

Tässä on liiketoimintanne. Ensimmäiset käyttötapaukset rakennamme yhdessä tiimienne kanssa ja siirrämme osaamisen teille, kunnes kannatte tämän kerroksen itse.

  • Pipelinet
  • Datamallit
  • KPI:t ja raportit
  • Agentit ja liiketoimintalogiikka
Alustan ylläpitoglueckkanja

Jotta alusta toimii silloin, kun tiiminne tarvitsevat sitä, eikä maksa enempää kuin on tarpeen.

  • Cluster Health
  • Runtime- ja kirjastopäivitykset
  • Backup ja restore
  • Table Maintenance
  • Fabric-kapasiteettien ajastus
  • Kustannusoptimointi
  • Valvonta vakavuusluokin
  • Kuukausittainen service review
Foundation koodinaglueckkanja

Jotta jokainen ympäristö vastaa koodia ja koodi uusinta releasea.

  • OpenTofu ja Terragrunt
  • Asiakaskohtainen konfiguraatiorepositorio
  • Drift Detection ja remediation
  • Release Train

Alusta, jolla on versionumero

Dataplatformit vanhenevat harvoin näyttävästi, vaan hiljaa, runtime kerrallaan. Siksi Azure Data Foundationilla on releaset kuin ohjelmistolla, ja teidän ympäristönne seuraa niitä.

  1. 1Releasen julkaisuKehitämme foundationia jatkuvasti ja julkaisemme uusia versioita dokumentoiduin muutoksin.
  2. 2Version käyttöönottoRelease Train tuo uuden version ympäristöönne, ja jokainen muutos on jäljitettävä diff.
  3. 3Poikkeamien tarkistusDrift Detection vertaa koodia ja ympäristöä joka viikko ja palauttaa poikkeamat.
  4. 4Runtimejen päivitysPidämme Databricks-runtimet ja kirjastot ajan tasalla kuukausittain tai neljännesvuosittain.

Foundation-päivitys vähintään kahdentoista kuukauden välein, sisältyy hintaan

Pidämme alustanne jatkuvasti ajan tasalla, ja viimeistään kahdentoista kuukauden kuluttua se saa foundation-päivityksen. Siksi huhtikuussa 2026 käyttöön otettu alusta ei vuonna 2028 näytä huhtikuun 2026 jäänteeltä.

Ensimmäisestä tapaamisesta ylläpitoon

Assessmentista toimivaan Managed Serviceen kuluu muutama viikko, josta projektityötä on enintään seitsemän työpäivää, eikä käyttötapaustenne tarvitse odottaa sitä, koska ne etenevät rinnalla ensimmäisestä päivästä alkaen.
  • Nykytilan kartoitus
    Nykytilan kartoitus
    Yhden päivän assessmentissa käymme läpi lähteet, olemassa olevat alustat ja ne käyttötapaukset, jotka ovat ensimmäisinä vuorossa.
  • Parametrien määrittely
    Parametrien määrittely
    Yhden päivän workshopissa päätämme yhdessä blueprintistä, ympäristöistä, lähteistä ja käyttöoikeusmallista.
  • Alustan käyttöönotto
    Alustan käyttöönotto
    Kahdesta neljään päivässä alusta syntyy koodista teidän tenanttiinne ja teidän parametrienne mukaan.
  • Luovutus ja ylläpito
    Luovutus ja ylläpito
    Yhden päivän luovutuksen ja yhden tai kahden viikon onboardingin jälkeen otamme ylläpidon hoitaaksemme Managed Azure Data Foundationina.

Datasiilosta alustalle

Data on ERP-järjestelmissä, antureissa, lokitiedostoissa ja tiedostojaoissa, harvoin siellä, missä sitä tarvitaan. Florian Stöckl ja David Fengler näyttävät webcastissa, miksi lakehouse korvaa perinteisen data warehousen, miten data kulkee Bronze-, Silver- ja Gold-kerrosten läpi, mikä kolmesta blueprintistä sopii millekin tiimille ja miten ylläpito ja projektivaiheet nivoutuvat yhteen.

Holy Trinity

Dataplatform tekee agentista hyödyllisen, ja agentti on syy, miksi dataplatformia ylipäätään halutaan. Siksi Managed Data Foundation ja Managed AI Foundation kuuluvat yhteen samalla identiteetillä Entra ID:ssä, samoilla guardraileilla ja samalla ylläpitomallilla, ja Managed Container Foundation antaa workloadeille hallitun ajoympäristön. Sitä, miten nämä kolme toimivat yhdessä, kuvataan blogikirjoituksessa The Holy Trinity.
Isometrinen kuvitus varastorakennuksesta paketteineen ja sen vieressä ruutu ”ADF” eli Azure Data FoundationIsometrinen kuvitus savupiipullisesta tehtaasta ja sen vieressä ruutu ”ACF” eli Azure Container FoundationIsometrinen kuvitus päällekkäin pinotuista moduuleista ja chat-käyttöliittymästä sekä sen vieressä ruutu ”AIF” eli AI Foundation

Alussa on yksi päivä

Assessment

Ennen tarjousta tehdään nykytilan kartoitus. Käymme yhden päivän aikana läpi lähteenne, olemassa olevat alustanne ja ensimmäiset käyttötapauksenne ja kirjaamme, mikä blueprint sopii ja mihin alustan on pystyttävä. Tulos on teidän, jatkoittepa kenen kanssa tahansa.

  • LähteetIntegraatioMitkä järjestelmät liitetään ja missä järjestyksessä.
  • KäyttötapauksetAnalytics & AIMihin kysymyksiin vastataan ensin, raportista agenttiin.
  • GovernanceKatalogi ja oikeudetKuka saa nähdä mitäkin dataa ja miten se näkyy katalogissa.
  • YlläpitoBlueprint ja ympäristötMikä blueprint sopii ja montako Data Environment -instanssia tarvitsette.

Mitä meiltä kysytään ensimmäisessä keskustelussa

Azure Databricks vai Microsoft Fabric, kumpi sopii meille?

Ratkaisevaa on vähemmän tekniikka kuin tiiminne. Jos ohjelmoitte datankäsittelyä ja koulutatte omia malleja, Azure Databricks palvelee teitä hyvin, ja jos työskentelette pääasiassa Power BI:n parissa ja haluatte liiketoimintayksiköille nopeasti tuloksia, Microsoft Fabric. Molempiin tarpeisiin on hybridi-blueprint. Suosituksen laadimme assessmentissa.

Onko Azure Data Foundation sama asia kuin Azure Data Factory?

Ei. Azure Data Factory on Microsoftin palvelu dataintegraatioon. Azure Data Foundation on meidän alustamme, joka koostuu arkkitehtuurista, koodista ja ylläpidosta ja jossa integraatiotyökalut ovat yksi rakennuspalikka monien joukossa. Siksi emme myöskään lyhennä sen nimeä.

Käytämme jo Databricksia tai Fabricia. Pitääkö meidän aloittaa alusta?

Ei välttämättä. Assessmentissa selvitämme, mitä voidaan ottaa sellaisenaan mukaan ja mikä kannattaa rakentaa uudelleen koodista. Datanne ja pipelinenne pysyvät teidän, ja niiden alla olevan alustan nostamme foundationin standardiin.

Missä datamme sijaitsee?

Teidän tenantissanne ja siinä Azure-regionissa, jonka itse määritätte. Rakennamme ja ylläpidämme alustaa siellä, missä se on, emmekä omassa ympäristössämme.

Mikä jää meille?

Pitkällä aikavälillä pipelinet, datamallit, KPI:t ja liiketoimintalogiikka, koska niissä on liiketoimintanne. Alussa rakennamme ensimmäiset käyttötapaukset yhdessä tiimienne kanssa ja siirrämme osaamisen, kunnes tiimit kantavat tämän kerroksen itse. Alla olevaa alustaa ylläpidämme me.

Tarvitsemmeko oman data-tiimin?

Alustan ylläpitoon ei, sen hoidamme me. Liiketoimintalogiikkaa varten tarvitsette pitkällä aikavälillä ihmisiä, jotka ymmärtävät datanne, joko omassa talossa tai kumppanilla, ja autamme tämän osaamisen rakentamisessa.

Mikä on Data Environment?

Yksikkö, jonka mukaan laskutamme: alustan itsenäisesti ylläpidetty instanssi, esimerkiksi yhdelle konserniyhtiölle tai selvästi rajatulle data-alueelle. Montako niitä tarvitsette, selviää assessmentissa.

Miten Azure Data Foundation liittyy AI Foundationiin?

Data Foundation tekee datastanne agenttien hyödynnettävää, ja AI Foundation tarjoaa alustan, jolla nämä agentit toimivat. Molemmilla on yhteinen identiteetti, samat guardrailit ja sama ylläpitomalli, ja molemmat seisovat Azure Foundationin päällä.

Mitä Azure Data Foundation maksaa?

Laskutamme kertaluonteisen setupin ja kuukausimaksun jokaisesta Data Environmentista, ja säännöllinen foundation-päivitys sisältyy siihen. Tarjouksen saatte assessmentin jälkeen, kun tiedetään, mikä blueprint valitaan ja montako ympäristöä tarvitsette.

Lisää aiheesta

Ota yhteyttä

Florian Stöckl
Data on arvokasta vain, kun se on luotettavaa, turvallista ja oikeiden ihmisten saatavilla. Azure Data Foundation luo juuri tämän perustan, jotta voitte keskittyä oivalluksiin ettekä infrastruktuuriin.
Florian StöcklAzure Lead