Rendezett adatbázissá alakítom a rendetlen adatait.

A rendetlen, strukturálatlan adatok megfelelő strukturált Microsoft SQL Server (MSSQL) adatbázissá alakítása az egyik legértékesebb átalakítás, amelyet egy szervezet végrehajthat. A nyers adatok gyakran kaotikus formában érkeznek – inkonzisztens formázású táblázatok, duplikált rekordok, hiányzó értékek, szabad szöveges mezők és ellentmondásos elnevezési konvenciók. Ezt a rendetlen adatot” nehéz lekérdezni, jelentést készíteni róla és megbízni benne. Azáltal, hogy strukturált MSSQL adatbázisba migrálja, rendet, konzisztenciát és integritást biztosít az eddig megbízhatatlan információknak.

Az átalakítási folyamat jellemzően adatprofilozással és tisztítással kezdődik: duplikátumok azonosítása, formátumok szabványosítása (dátumok, telefonszámok, címek), inkonzisztenciák feloldása és érvényesítési szabályok meghatározása. Az adatok tisztítása után egy relációs sémát terveznek az MSSQL-ben – elsődleges kulcsokkal, idegen kulcsokkal, korlátozásokkal és megfelelő adattípusokkal kiegészítve –, hogy az entitások közötti kapcsolatok explicit módon modellezve és érvényesítve legyenek. Ez a struktúra megszünteti a redundanciát és biztosítja, hogy minden rekord megfeleljen a meghatározott üzleti szabályoknak.
Az SQL Server Integration Services (SSIS) képes adatokat kinyerni táblázatokból, sík fájlokból vagy régi rendszerekből, átalakítási logikát alkalmazni és normalizált táblákba betölteni. Az átmeneti táblák lehetővé teszik a nyers adatok első betöltését, érvényesítését, majd T-SQL szkriptek segítségével a termelési táblákba való egyesítését. Az olyan funkciók, mint a tranzakciók, a hibakezelés és a naplózás, ellenőrizhetővé és megismételhetővé teszik a folyamatot.