MongoDB
 sql >> база данни >  >> NoSQL >> MongoDB

Шест критични компонента на успешното управление на данните

Какво е управление на данните?

За големи организации или компании, които се занимават с управление на данни, управлението на данни притежава ключът към успеха при управлението, контролирането или управлението на данните, които са били притежавани или събирани. Това е от основно значение за всяка организация или компании. Вашият бизнес се възползва от последователни, общи процеси и отговорности, ако стратегията ви за управление на данните работи според плана. Вашите бизнес драйвери ще подчертаят какви данни трябва да бъдат внимателно контролирани във вашата стратегия за управление на данните, тъй като резултатите следват очакваните ползи от това усилие. Тази стратегия ще бъде в основата на вашата рамка или програма за управление на данните.

Управлението на данните дефинира набор от принципи за гарантиране на качеството на данните в една компания. Той описва процесите, ролите, политиките или отговорностите и показателите заедно, за да гарантира отчетност и собственост върху активите с данни в цялото предприятие.

Управлението на данните е ключът към постигането на организационните цели, особено на ниво предприятие. Той определя кой какви действия може да предприеме, върху какви данни, в какви ситуации, използвайки какви методи. За да обобщим, какво представлява управлението на данните, е свързано със стандарти, политики и как може да се използва повторно въз основа на неговите модели. Неговият цялостен обхват обхваща системата от права за вземане на решения и отговорности за свързани с информация процеси, изпълнявани по договорени модели, които описват кой какви действия с каква информация и кога, при какви обстоятелства, с какви методи използва.

В даден пример помислете за онези юридически лица, които имат медицинска застраховка или свързани със здравето организации или компании. Поверителността на данните е много важна и трябва да отговаря на регулаторните изисквания като HIPAA или GDPR. Ако вашият бизнес драйвер за вашата стратегия за управление на данните гарантира поверителност, данните за пациентите ще трябва да се управляват сигурно, докато преминават през вашия бизнес. Изискванията за запазване (напр. история на това кой каква информация е променил и кога) ще бъдат определени, за да се гарантира съответствие със съответните държавни изисквания.

Критични компоненти на успешното управление на данните

Доброто управление на данни и анализи позволява по-бързи и по-интелигентни решения. Лидерите по данни и анализи, включително главните директори по данни (CDO), трябва да гарантират, че техните активи за данни и анализи са добре управлявани, за да позволят бизнес стратегия и корпоративни приоритети. Добре обработеното управление на данните предоставя необходимата информация за вземане на оптимални бизнес решения. С всичко това важни фактори служат като ключови компоненти, които са от решаващо значение за успеха на управлението на данните.

В този блог ще разгледаме петте критични компонента на успешното управление на данните.

Архитектура на данни

Архитектурата на данните действа като сърцето и душата на управлението на данните. Ако архитектурният дизайн има недостатъци, качеството на данните ще се окаже лошо или повредено по природа. Каквото и да е било усвоено и обработено, резултатът не може да бъде надежден и може да повлияе на прозренията, анализирани от предприятието, и да повлияе на бизнес целите.

Съгласно The Open Group Architecture Framework (TOGAF), Data Architecture описва структурата на логическите и физически активи от данни и ресурсите за управление на данни на организацията. Това е издънка на корпоративната архитектура, която включва моделите, политиките, правилата и стандартите, които управляват събирането, съхранението, подреждането, интегрирането и използването на данни в организациите. Архитектурата на данните на организацията е от компетенцията на архитектите на данни.

Архитектурата на данните разкрива мистерията между поредица от компоненти, обхванати от управлението на данните. Той систематично свързва всички включени компоненти, докато данните се грижат в рамките на организация или предприятие. Той просто обяснява къде съществуват данните и как те се движат в организацията (частни или изходящи и входящи данни) и нейните системи. Той подчертава промените и трансформациите, направени при преминаването на данните от една система към друга.

Тези инвентаризация на данни и диаграми на потока от данни предоставят информацията и инструментите, от които екипът за управление на данните (DGT) се нуждае, за да взема правилно решения относно политиките и стандартите за данни. Всъщност в много случаи заинтересованите страни в бизнеса казват, че биха искали да разберат по-добре пейзажа на данните и как се движи в организацията. Ролята на DGT в обучението на организацията относно тази информация и наслагването й с архитектурни политики и стандарти помага да се гарантира точността и целостта на данните през целия й жизнен цикъл.

Качество на данните

Качеството на вашите данни отразява как се събират, планират, анализират и обработват. Според Gartner, четиридесет и два процента от лидерите по данни и анализи не оценяват, измерват или наблюдават управлението на своите данни и анализи въз основа на проучване на Gartner. Докато тези, които казаха, че измерват своята управленска дейност, се фокусираха главно върху постигането на цели, ориентирани към съответствието.

Управлението на данните мотивира организацията или компанията да позволява по-бързи и по-интелигентни решения с правилните данни и анализи. Тъй като управлението на данните бързо се подобрява в днешно време, организациите започват да разглеждат това, тъй като е добро начало да започнат да се фокусират върху данни и анализи, за да помогнат за подобряване на качеството на техните данни, докато расте. Той предоставя по-добра информация, за да стимулира по-добро информационно поведение чрез техните политики. Тези политики помагат за максимизиране на инвестициите, които организациите имат в данни и анализи и съдържание, било то мултимедия, бизнес имейли и т.н. Въпреки това, практиките на управление продължават да са ориентирани към данни, а не към бизнеса.

Тъй като управлението на данните наблюдава качеството на данните, DGT идентифицира кога данните са повредени, остарели или неточни. Старите или остарели данни могат да бъдат архивирани или изчистени, ако вече не са необходими. Качеството на данните не е единственото, което трябва да се поддържа, но също така трябва да вземе предвид разходите и трябва да помисли за почистване на килера и избягване на всяка бъркотия с вашите целеви данни. Вашият екип за управление на данните трябва да може лесно да задава правила и процеси. Вашите доверени данни ще представляват стълбовете за организации, управлявани от данни, които вземат решения въз основа на информация от много различни източници. В доклада на Dataversity се казва, че 58% от тези организации, които са участвали в тяхното проучване, казват, че разбирането на качеството на изходните данни е едно от най-сериозните пречки във веригата на стойността на данните на тяхната организация. Струва си да се отбележи, че въз основа на тяхното проучване автоматизирането и съпоставянето на бизнес условия с активите от данни и документирането на родословието до ниво колона са критични стъпки за оптимизиране на качеството на данните.

Управление на данни

Тук трябва да зададете тези важни въпроси, какви данни да управлявате и къде трябва да се намират? Трябва ли да се съхранява локално или би било ценно и валидно данните да се намират на трета страна, като публичен облак.

Управлението на данни е по същество изпълнението на стратегията за управление на данните. Той определя отговорността за прилагането на стандартите и политиките, които са въведени в стратегията или рамката за управление на данните. Той обхваща често срещаните задачи като

  • Създаване на правила за достъп, базиран на роли (RBAC), които задават нивото на достъп за данни

  • Внедряване на правила за база данни в съответствие с политиката за управление на данните

  • Създайте и поддържайте  сигурността на данните ], за да спазвате това, което DGT на CDO е идентифицирал за данните, притежавани от организацията

  • Вземане на подходящите мерки за минимизиране на риска, свързан със съхраняването на чувствителни данни

  • Създаване на система за управление на основните данни, която представлява единичен изглед на данни в предприятието.

Управлението на данни е от ключово значение за извършването на този вид инвентаризация на данни:притежаване на стратегия и методи за достъп, интегриране, съхранение, прехвърляне и подготовка на данни за анализ. Според Forrester Research, ефективното управление на данните произтича от зрелостта на управлението на данните.

Софтуерни инструменти за данни

Управлението на данните обхваща процесите за управление на жизнения цикъл на данните. Той има за цел да гарантира наличността, използваемостта и целостта на данните. Докато те се поддържат, DGT и CDO трябва постоянно да наблюдават и анализират данните на организацията. За него трябва да се грижите правилно и да се съхранява безопасно и сигурно. Това не може да бъде постигнато без подходящите софтуерни инструменти, на които се разчита като налични решения за използване. Може да се разчита на услуги на трети страни, особено когато се съхранява в облака или локално.

Тези решения помагат на организациите да поддържат последователен набор от политики, процеси и собственици около техните активи с данни, което им позволява да наблюдават, управляват и контролират ефективно движението на данни. Тези продукти помагат на потребителите да установят насоки, правила и мерки за отчетност, за да гарантират спазването на стандартите за качество на данните. Инструментите за управление на данните често също предоставят препоръки за повишаване на ефективността и рационализиране на процесите.

Сигурност

В предишната ни публикация, сред безбройния брой заплахи от злонамерен софтуер, засягащи бизнеса, рансъмуерът е най-големият нарушител, струващ на организациите над 7,5 милиарда долара само през 2019 г. Представете си колко драстични нарушения на сигурността могат да влошат организационния ви план за изграждане на предприятие, което да се размножава.

Управлението на данните е жизненоважно, тъй като CDO или DGT трябва да анализират задълбочено и да покрият тези поверителни данни. Ако сигурността на данните е систематично архитектурна, тя е проследима, подобно на успешното управление на данни. Той може да определи откъде идват вашите данни, къде се намират, кой има достъп до тях, как се използват и как да ги изтриете.

Управлението на данните определя правилата и процедурите за управление на вашите организационни данни, предотвратявайки потенциални течове на чувствителна бизнес информация или данни за клиенти, така че данните да не попаднат в грешни ръце. С нарастването на данните това може да бъде чисто предизвикателство.

За наследени платформи и за по-големи организации с богати данни, наследените платформи са склонни да създават изолирана информация, която е по-трудно да се определи откъде идва. Тези силози често се експортират, предимно във вашата база данни, и се дублират, за да се комбинират данни с други разделени данни, което прави още по-трудно да се разбере къде са отишли ​​всички данни.

Съответствие

Управлението и спазването на данните работят ръка за ръка. В доклада на Dataversity 48% от компаниите класират спазването на регулаторите като основен двигател за управление на данните. Без правилно управление на данните как можете да сте сигурни, че вашата организация се придържа към разпоредбите?

Данните узряват бързо, особено когато тази пандемия е започнала; хората разчитат толкова много на социалните медии и други средства през интернет, за да избегнат контакт с други хора. Данните нарастват толкова много и това означава, че спазването на данните трябва да бъде разгледано предварително и да се погрижат добре от такива организации или компании, които притежават вашата чувствителна информация и данни. Организациите трябва да спазват наредбите в своето правителство, към които принадлежат. Съгласно Европейския съюз имате GDPR (Общ регламент за защита на данните), докато в САЩ имате добре познатия PCI DSS (Стандарт за сигурност на данните в индустрията за разплащателни карти), HIPAA (Закон за преносимост и отчетност на здравното осигуряване) и SOX ACT или Sarbanes – Закон на Оксли от 2002 г. (известен още като Закон за реформа в счетоводството и защита на инвеститорите в публичните компании).

Спазването е много важно за успешното управление, тъй като тази стратегия трябва да бъде въведена преди събирането и узряването на данните в организацията. Съответствието насочва организацията да започне в съответствие с разпоредбите и спазването в рамките на правителството, които вашата рамка за управление на данни е покрила. Тези разпоредби изискват организациите да могат да проследяват своите данни от източника до тяхното остаряване, да идентифицират кой има достъп до тях и да знаят как и къде се използват. Управлението на данните определя правила и процедури около собствеността и достъпността до данните.

Вашата рамка за управление на данните гарантира, че данните ви са подходящи за целта си. Като приведете в съответствие хората, процесите и технологиите на вашата организация около централна стратегия за данни, можете да започнете да използвате данните си, за да се възползвате от по-големи бизнес цели. По отношение на съответствието, наличието на ясни процеси за контрол върху вашите данни е в съответствие с предварително зададените бизнес правила. Това е особено важно в силно регулирани индустрии като финанси и застраховане. Управлението на данните означава да гарантирате, че разполагате с процеси за контрол на вашите данни и да гарантирате, че всички разпоредби се спазват във всички практики за данни на вашата организация. Ефективното съответствие може да дойде само с цялостен и цялостен подход към вашата стратегия за управление на данните. Как можете да очаквате да сте 100% сигурни, че спазвате разпоредбите, без пълен контрол върху вашите данни и как те се събират и съхраняват. Без него чувствителната информация може да попадне в грешни ръце или да бъде неправилно изтрита, което води до правителствени или регулаторни финансови санкции, съдебни дела и дори затвор. Snowflake предлага функции, които могат да задават контроли върху собствеността и достъпа до данни, позволявайки прилагането на правила и процедури за управление на данните. Те включват динамично маскиране на данни и защитени изгледи.

Трите критични аспекта на изграждането на ефективна стратегия за управление на данните са хората, процесите и технологиите. С ефективна стратегия не само можете да гарантирате, че организацията ви остава съвместима, но също така можете да добавите стойност към цялостната си бизнес стратегия.

Заключение

Управлението на данни не е фиксиран и постоянен поток. Това е конвенция и практика, която трябва да бъде динамично в процес на работа. Управлението на данните разчита на това как данните узряват в рамките на организацията или компанията, особено когато се използват на ниво предприятие. От решаващо значение е за организациите, които ценят своите данни или данните служат като основен двигател на интереса на организацията да стабилизира финансовото си представяне. Определянето на тези 6 критични компонента е задължително и трябва да делегира точните хора, които да управляват и осигуряват интереса на организацията и компанията.


  1. Redis
  2.   
  3. MongoDB
  4.   
  5. Memcached
  6.   
  7. HBase
  8.   
  9. CouchDB
  1. PyMongo upsert изхвърля upsert трябва да е екземпляр на грешка bool

  2. Mongoose findOneAndUpdate и upsert не връщат грешки, няма засегнати документи

  3. реплика Задайте mongo docker-compose

  4. 2 начина за ограничаване на документите, върнати в MongoDB

  5. Мангуста, сортирайте заявката по попълнено поле