Mi az az adatháló? Az adatarchitektúra következő fejlődésének megértése

Az adatháló az adatkezelés decentralizált megközelítése, ahol az adatokat termékként kezelik, és a funkcionalitáson átívelő csapatok tulajdonában vannak, elősegítve az adatok hozzáférhetőségét, skálázhatóságát és minőségét az egész szervezeten belül a területorientált architektúrán és az önkiszolgáló adatinfrastruktúrán keresztül.

Ez az útmutató lebontja az adatháló architektúrát, hogyan működik, és mit jelent az üzleti műveletekre nézve. Mire befejezi az olvasást, már rendelkezni fog azokkal az eszközökkel, amelyekkel megnövelheti vállalkozását, és rugalmas maradhat a változásokkal szemben.

Zhamak Dhegani 2019-ben találta fel az adatháló kifejezést, mint a vállalat létfontosságú adatainak kezelésének forradalmi módját.

Ha valaha is hallotta a "ne tegye minden tojását egy kosárba" kifejezést, már érti az adatháló architektúra logikáját. Az adatháló az adatok tulajdonjogának decentralizált és széles körben elosztott megközelítésére utal.

Az adatháló alapelvei

Bár az Ön adatháló-architektúrája egyedi vonásokkal rendelkezhet, a központi elvek ugyanazok. Az adatháló egy olyan gyakorlati megközelítés az adatokhoz, amely biztosítja, hogy egyetlen szervezetnek sincs túl sok ellenőrzése vagy felelőssége.

Az alábbiakban az adatháló alapelvei és azok kapcsolata a hasonló eszközökkel, például az adattavakkal vagy az adatszövettel.

Fontos meghatározni, hogy mit jelent a tartomány az adathálós architektúra kontextusában. Ebben az esetben a domain egy üzleti egység bármely részhalmazára vagy környezetére utal , amely magában foglalhatja az alkalmazottakat, a beszállítókat, a termékeket és az ügyfeleket.

A domain-orientált adattulajdonlás azt jelenti, hogy nem egyetlen entitás rendelkezik az adatok tárolásának, elosztásának vagy hozzáférésének teljes ellenőrzésével. A decentralizált adatkezelés előnyei a következők:

• Az adatfogyasztók közvetlenül az adattulajdonosoktól kapnak hozzáférést az adattermékekhez, ahelyett, hogy több közvetítőn keresztül kelljen szitálniuk ahhoz, hogy megkapják, amire szükségük van
• A szűk keresztmetszetek és az adatcsatornák csökkentése a több szervezet közötti zökkenőmentesebb kommunikáció biztosítása érdekében
• A különböző területek közötti adatsilók megakadályozása, elkerülve, hogy az adatvagyonok el legyenek zárva és el legyenek zárva azoktól, akiknek szükségük van rájuk

Az adatok termékként való kezelése az adatháló másik nagyhatású eredménye , amely lehetővé teszi a vállalkozások számára, hogy a lehető legtöbb értéket hozzák ki eszközeikből.

Bár az átmozgatott adatok technikailag nem a B2C - a vállalkozás más alkalmazottai számára mennek -, a termékszemlélet elengedhetetlen a rendszer zökkenőmentes működéséhez. A dolgozóknak a zökkenőmentes kommunikáció és a következetes szervezés iránti elkötelezettségre is szükségük van ahhoz, hogy jól végezhessék munkájukat.

Az adatok termékként való kezeléséhez többek között a következő tulajdonságokra van szükség:

• Az adatok központi adatkatalógusban való könnyű felkutatása
• Egységes elnevezési konvenciók a szervezeten belül a félreértések és a felesleges időveszteség elkerülése érdekében
• Minőségellenőrzési funkciók, mint például az adatok ellenőrzése az alapvető ellenőrzési módszerek után

Ássunk egy kicsit mélyebbre az adathálózatban, és ismerjük meg, hogyan működik egy decentralizált adatforrás a gyakorlatban. Az önkiszolgáló adatinfrastruktúra biztosítja, hogy minden egyes tartomány bizonyos szintű felelősséget viseljen az adatforrás karbantartásában.

Az üzleti tartománytól függetlenül mindenkinek megvan a maga szerepe, amikor az adatok szűréséről, tisztításáról és betöltéséről van szó. Például ennek a felelősségnek a megosztása úgy nézhet ki, mintha az adatmérnököknek adná meg az adattechnológia kezelésének képességét, míg az adatelemzők később címkézik és rendszerezik az adatokat. Ha kisebb a csapata, több felelősség hárulhat kevesebb ember vállára. A decentralizált adatkezeléshez használható eszközök és platformok közül néhány a decentralizált tárolás, a titkosítás és a blokkláncok.

Végül, de nem utolsósorban, az adathálónak magas szintű biztonságra van szüksége a megfelelő működéshez. Mivel ennyi tartomány mind részt vesz a munkában, mindenkinek meg kell győződnie arról, hogy a legjobb gyakorlatokat követi az adatfelhasználás biztonsága érdekében.

Minden tartománynak lehetősége van egyedi szabványokat és végrehajtást biztosítani az igényeitől függően. Például előfordulhat, hogy az egyik csapat nem képes átnevezni az adatokat, míg egy másik csapat nem törölheti a duplikátumokat előzetes jóváhagyás nélkül.

Nem számít, hogy milyen típusú az irányítás, valamilyen formában szükséges az irányítás, beleértve a következetesen végrehajtott szabványokat, irányelveket és gyakorlatokat, valamint annak elemzését, hogy az adattermékét hogyan és ki fogja használni.

Most, hogy már érti, mi az az adatháló és mire használják, itt az ideje, hogy lebontja a pénzügyi előnyöket a vállalkozása számára. Az adattermékek létrehozása nem elég - szem előtt kell tartania a skálázhatóságot, az agilitást és a minőséget.

A méretezés nem könnyű. A McKinsey szerint csak 22%-a a vállalkozásoknaktette ezt sikeresen az elmúlt tíz évben. Az adatháló lehetővé teszi, hogy megbízhatóan, a költségvetés átalakítása nélkül növelje vállalkozását.

Mivel az adatháló nem támaszkodik központi adatplatformra, a felelősség egyenletesebben oszlik meg. Az elosztás egyik fő előnye az innováció és a menet közbeni újratervezés képessége, amely lehetővé teszi az adatfogyasztók számára, hogy új módon közelítsék meg az adatokat.

Az önkiszolgáló adatplatform független irányítása bizonyos fokú szabadságot kínál, amely nem található meg a központi adatstruktúrában. Még akkor is, ha az egyik csapat korlátozásokkal vagy a közelmúltban bekövetkezett működési változásokkal küzd, a többi csapattag viszonylag zavartalanul folytathatja a munkát. Ez az agilitás egy másik előnye, amelyet a következő részben fog látni.

Amikor adattermékeket hoz létre, figyelembe kell vennie, hogy az adatokat hogyan fogják letölteni vagy továbbosztani. Az adatháló lehetővé teszi, hogy a különálló tartományok gyorsabban, a legjobb gyakorlatuknak megfelelően közelítsék meg az adatokat, csökkentve a lemaradásokat vagy a várakozási időt.

A lekérdezéstől a felfedezésig a tartományok agilisabban tölthetik be szerepüket, és hatékonyabban végezhetik el feladataikat. Ez nem jelenti azt, hogy bárki azt csinálhat, amit akar - még mindig vannak bevált gyakorlatok és üzleti korlátok -, de az biztos, hogy kevesebb az akadály.

Ez az agilitás jelentős üzleti innovációhoz és piaci reagálóképességhez vezet. Nem számít, merre tart az iparág, bízhat abban, hogy önkiszolgáló adatplatformja megfelel a kihívásnak.

Míg az adattó olyan nyers adatokból áll, amelyeket még nem szerveztek vagy szűrtek, az adatháló természeténél fogva több adatminőséget igényel. Mivel az adatokat adattermékként kezeli, ugyanazokat a követelményeket támasztja velük szemben, mint amit egy ügyfélnek nyújt.

Hogyan néz ki tehát az adatminőség a gyakorlatban? Az adatminőség olyan adatok biztosítását jelentheti, amelyeket a domain-csapatoknak megfelelően elemeztek és tisztítottak meg minden hibától, például a sérült fájloktól vagy a duplikált fájloktól. Ez úgy is kinézhet, mint a strukturálatlan adatok jobb rendszerezése, hogy az emberek könnyebben megtalálják azokat.

Az adatminőség javítása biztosítja, hogy az adatfogyasztók hatékonyabban tudják elvégezni a munkájukat, ami pozitív hullámhatást eredményez az egész vállalaton belül. Az adatminőség figyelmen kívül hagyása az adathálózatban a zavart, a pazarló tárolást vagy az adatsilókat kockáztatja.

Az adatmérnököktől a központi adatcsapatig mindenkinek képesnek kell lennie a hatékony együttműködésre. Az adatháló fokozza a szakterületi csapatok közötti együttműködést azáltal, hogy mindenkinek konkrét feladatokat ad az adatok összegyűjtésére, elemzésére és felhasználására.

Mivel az adatháló folyamatos karbantartást igényel annak biztosítása érdekében, hogy az adatok elég működőképesek legyenek a használathoz, az együttműködés kulcsfontosságú jellemző. Minden területi csapatnak rendszeres kapcsolatban kell állnia annak biztosítása érdekében, hogy az üzleti funkciók számára az adattermékek egységes minőségi szintet tartsanak fenn. Összességében az adatok hálója jobb, több funkciót átfogó betekintést és adatvezérelt döntéshozatalt eredményez.

Az adatháló nem az egyetlen architektúra, amelyet vállalkozásához használhat. Az alábbiakban bemutatunk néhány variációt, amelyet érdemes figyelembe vennie a biztonságosabb és hatékonyabb adatműveletek összeállításakor.

Ránézésre egy adatháló és egy adattárház hasonlónak tűnhet , mivel mindkettő nagy mennyiségű adattermékkel foglalkozik. Az adattárház azonban centralizáltabb megközelítés, míg az adatháló decentralizált.

Az adattárház rendkívül vonzó, mivel leegyszerűsíti az adatok üzleti megközelítését, mivel mindent egyetlen tárolóhelyen konszolidál. Ez a megközelítés hasznos lehet a kisebb vállalkozások számára, amelyek még nem biztosak abban, hogy szükségük van-e az adatháló méretére és méretére. Az adattárház hátránya azonban az, hogy nehezen skálázható. Funkcionalitása is korlátozottabb, és nem olyan agilis, mint egy adatháló.

Az adatháló decentralizált megközelítést kínál, ahol több tartományi csapat vállal felelősséget az adatok tárolásáért, kategorizálásáért, elosztásáért és felhasználásáért.

Data Mesh vs. Data Lakes

Az adathalmaz és az adatháló a spektrum szinte ellentétes végén létezik. Az adattó a nyers, strukturálatlan adatok tárházát kínálja, míg az adatháló magasabb szintű szervezést igényel.

Ez azt jelenti, hogy az egyik automatikusan jobb, mint a másik? Nem teljesen. Az adattó nagyon hasznos a kisebb vállalkozások számára, amelyeknek nagy mennyiségű adatot kell a lehető leggyorsabban összegyűjteniük. Alacsony belépési korlátja és agilis alapjai hasznos eszközzé teszik a növekvő vállalkozások számára.

Ez azt jelenti, hogy az adattó még mindig korlátozott funkcionalitással rendelkezik. Mivel az adatok nyersek, az olyan problémák, mint a sérült fájlok, a duplikált fájlok és a rendezetlen fájlok gyorsan kiderülnek.

Végül, de nem utolsósorban, figyelembe kell vennünk az adatszövetet. Míg az adatháló decentralizált alapot használ az adatok elosztásához és felhasználásához, az adatszövet központi adatmegközelítést igényel.

Az adatszövet nemcsak központi adatstruktúrát igényel, hanem sokkal automatizáltabb is, mint az adatháló. Az adatszövet-architektúra kevés felügyeletet igényel ahhoz, hogy a több forrásból származó adatokat egyetlen egyszerű helyen gyűjtse össze az emberek számára. Ez a hiperautomatizált megközelítés nagyon vonzó lehet azon vállalkozások számára, amelyeknek sajátos munkamódszerük van, és a lehető legtöbb időt kell megtakarítaniuk.

Most, hogy megértette, hogyan működik az adatháló, és milyen előnyökkel jár a vállalkozásának, talán azon gondolkodik, hogy érdemes-e megvalósítania. Mielőtt ezt megteszi, fontolja meg az alábbi kulcsfontosságú kérdéseket, hogy jobban átlássa, milyen előnyökkel járhat.

Az első kérdés, amit az adathálóval kapcsolatban fel kell tennie magának, az az Ön vállalkozásának mérete és összetettsége. Elég nagy és összetett az Ön szervezete ahhoz, hogy a decentralizált megközelítés előnyeit élvezze?

Még néhány kérdés, amit fel kell tennie:

• Vannak-e skálázhatósági problémái a jelenlegi adatarchitektúrával?
• Több szakterületi csapata van, amelyek jobban tudnának együttműködni egymással?
• A következő évekre vonatkozó üzleti tervei között szerepel-e a szervezet bővítése?

Az adatkezelés összetett kérdés, amely a biztonsági kérdésektől a megfelelő szervezésig terjed. A legtöbb szervezet az adatkezelést létfontosságúnak tartja a sikerhez, ezért nem engedheti meg magának, hogy ne tegye fel a következő kérdéseket.

• Vannak-e szűk keresztmetszetek, silók vagy minőségi problémák, amelyek hátráltatják a műveleteket?
• Jobb skálázhatóságra és agilitásra van szüksége az adatok kezelésében?
• Központosított vagy decentralizált megközelítést szeretne?

Egy adatháló csak annyira jó, amennyire az azt használó adatfogyasztók. Ha az Ön szakterületi szakértelme csiszolásra szorul, az adatháló lehet, hogy túl nagy elkötelezettséget jelent.

Tegye fel a következő kérdéseket az adatplatform-csapat összetételéről, hogy megtudja, érdemes-e váltania:

• Rendelkeznek a csapatok erős szakterület-specifikus tudással?
• Mennyire változatos a szakterület-specifikus tudás?
• Úgy gondolja, hogy a csapatai készen állnak arra, hogy termékként magukénak érezzék az adataikat?

Még ha nemmel is válaszolsz néhány kérdésre, ez nem jelenti azt, hogy nem tudsz adathálót készíteni. Csak arra ügyeljen, hogy ne lépjen tovább anélkül, hogy foglalkozna ezekkel a kérdésekkel, mivel a felkészültség hiánya később mindenképpen problémává válik.

Az adatháló a éppúgy filozófia, mint egy adatkezelési rendszer. Egy ilyen program megvalósítása elkötelezettséget, együttműködést és elszántságot igényel a siker érdekében.

• Szervezetének kultúrája összhangban van a decentralizált elvekkel?
• Hajlandóak-e az Ön csapatai elfogadni az adatok birtoklása és az együttműködés irányába történő kulturális változást?
• Reagálnak és proaktívak a csapatai az adatok kezelése vagy terjesztése során?

Az adatháló több felügyeletet igényel, mint egy adattó. Nem kell belevágni egy adathálóba, ha úgy gondolja, hogy nem lesz elegendő erőforrás a karbantartásukra.

• Rendelkezik-e erőforrásokkal ahhoz, hogy beruházzon egy önkiszolgáló infrastruktúrába vagy irányítási keretrendszerekbe?
• Elkötelezett-e az Ön szervezete a jobb adatkezelés folyamatos támogatása és fejlesztése mellett?
• Tudja, hogy milyen erőforrásokat szeretne használni egy adatháló struktúra létrehozásához?

Ha megválaszolta a fenti kérdéseket az adathálóval kapcsolatban, és szeretne egyet megvalósítani, itt az ideje, hogy megvizsgálja a megvalósítást. Bár az önkiszolgáló adatplatform létrehozása a méretéből adódóan ijesztőnek tűnhet, a folyamat lépésekre szűkíthető.

Az első lépés az, hogy az adatokat adatként kezelje. Ez egy olyan perspektívaváltás, amely része a szervezet struktúrájának megváltoztatására irányuló értékelési és tervezési folyamatnak.

A szervezeti felkészültség értékelése magában foglalhatja a kulcsfontosságú területek, valamint az érdekelt felek azonosítását. Mit szeretne elérni a vállalkozásával, és hogyan tartják a rendezetlen adatok távol ezektől a céloktól?

Az adatháló létrehozásakor a területi csapatoknak meghatározott szerepkörökkel és felelősségi körökkel kell rendelkezniük. Az egyik csapat lehet felelős az adatok összegyűjtéséért, míg mások az üzleti döntések meghozatalához szükséges elemzésért.

A szakterületi csapatok képzése és beillesztése létfontosságú egy zökkenőmentesen működő önkiszolgáló adatplatform létrehozásához. A jól megtervezett képzési programok növelik a munkavállalók elkötelezettségét. Ha figyelembe vesszük, hogy az adatháló egy felhasználó-központú megközelítés, akkor az Ön érdeke, hogy az említett felhasználókat fenntartsa.

Ha már pontosabb elképzelése van arról, hogyan fognak működni a domain-csapatok és az általános üzleti célok, itt az ideje, hogy kiépítse az önkiszolgáló adatinfrastruktúrát. Ebben a szakaszban elkezdi kiválasztani a különböző eszközöket és platformokat, amelyek segítenek a domainadatok kezelésében.

Azokat az eszközöket kell előnyben részesítenie, amelyek lehetővé teszik a skálázhatóságot és a rugalmasságot. Például egy olyan felhőalapú tárolási megoldás, amely lehetővé teszi a szükség szerinti bővítést, vagy mélyebb betekintést nyújt a tartományi adatokba. Olyan biztonsági szolgáltatást is igénybe vehet, amely az érzékeny tevékenységek folyamatos elemzését biztosítja.

Az adattermékeinek következetes irányításra és megfelelőségre van szükségük, hogy a legjobb gyakorlatokat mindenhol biztosítani tudják. Az utolsó dolog, amit szeretne, hogy a nem megfelelő emberek férjenek hozzá a tartományi adatokhoz, vagy rosszul kezeljék azokat.

Az irányítási keretrendszerek kialakítása magában foglalja az egyes tartományi csapatokra vonatkozó szabványok létrehozását. Például bizonyos hozzáféréseket és jogosultságokat biztosíthat az adott személy csapatszerepétől függően. Ha időt szán az adatminőségre, a biztonságra és az interoperabilitásra vonatkozó irányelvek kialakítására, az biztosítja, hogy a domainadatok biztonságban és használhatóak maradjanak.

Ahogy kitalálod az adatháló funkcióját, nem kell mindent beleadnod a megvalósításba. Okos dolog kísérleti projektekkel kezdeni, amikor megismerkedik az adattermékekkel és a velük járó új elvárásokkal.

A kísérleti projektekkel való kezdés lehetővé teszi a visszajelzések gyűjtését és a folyamatos javítást. Lehet, hogy valójában egy központi adatcsapatot szeretne, vagy rájön, hogy az adattudósoknak saját domain-csapatra van szükségük. Bár mindenképpen tanulhat más vállalkozásoktól és attól, hogyan közelítik meg az adatokat, bizonyos ismeretek csak próbálgatással és hibával szerezhetők meg.

Az adatháló összeállításának nem feltétlenül kell egyedül véghezvinnie a projektet. Az adatháló ugyanis eredendően olyan együttműködésre lett tervezve, amely humánus megközelítéssel alakítja át az Ön adattermékei.

Átfogó adatmegoldásokkal biztosítjuk Önnek az adatokhoz való hozzáférést és azok hatékonyabb felhasználását. Fejlett adatkezelési és integrációs képességeket biztosítunk a skálázható, megbízható adatinfrastruktúrák kiépítéséhez. A felhőalapú adatplatformunk lehetővé teszi az adatok kényelmes, biztonságos és következetes elérését.

Az InterSystems fejlett adatplatformjai, beleértve a decentralizált adatkezelés támogatását, megkönnyítik az önkiszolgáló adatinfrastruktúra létrehozását és karbantartását. Az évek során olyan vállalkozásoknak segítettünk, mint az egészségügyi létesítmények, hajózási vállalatok és befektetési bankok, hogy kezeljék és rendszerezzék adataikat.

A Chadwicks Group, a Murata Machinery és a Chess Logistics Technology néhány korábbi ügyfelünk, akiknek segítettünk az adatsilók és az adatvezérelt döntések terén. Akár az adattermékei életképessége miatt aggódik, akár adattavak korszerűsítésére törekszik, mi segítünk.

Az InterSystems elkötelezett a folyamatos fejlesztés és azadatechnológia élvonalában való maradás mellett. Folyamatos támogatást és együttműködést biztosítunk vállalkozásának, hogy biztosítsuk az adathálós kezdeményezések sikerét.

Vegye fel a kapcsolatot az InterSystems-szel, ha készen áll az adathálós paradigma kialakítására.

Kapcsolatfelvétel az InterSystems-szel