|
su.dbms
- SU.DBMS ----------------------------------------------------------------------
From : Michael 2:5020/400 07 Nov 2002 04:43:13
To : Gregory Kudinov
Subject : А вы сталкивались с проблемами с качеством данных?
--------------------------------------------------------------------------------
Hi Gregory,
GK> 1. В каких случаях приходится выделять качество данных (КД) в
GK> отдельную проблему с созданием сопутствующих механизмов чистки и
GK> выверки. А когда это можно полностью доверить пользователю - сам ввел,
GK> сам и исправь.
Hаверно это почти всегда отдельная проблема, а кто исправляет - зависит от
источника ошибки.
GK> 2. Как обстоит дело с обеспечением КД в современных СУБД. Вроде
GK> все производители, что стали на нелегкий путь создания Data Warehouse
GK> систем с OLAP должны озаботиться этой проблемой.
GK> Какие пакеты есть, ну, например у Oracle,
в общем ни каких или все, что в Oracle есть, начиная с check constraint и т.п.
Зависит от точки зрения
GK> а у остальных? Особенно
GK> интересно приходилось ли кому-нибудь ими пользоваться, или проще
GK> свое писать? Может вместе с модулями КД они еще и какую-то
GK> теорию обеспечения КД под свой инструментарий подводят?
http://www.trilliumsoft.com/
GK> 3. Что посоветуете почитать / с кем пообщаться по этой тематике.
GK> Газетные статьи? Публикации трудов конференций? Диссертации?
http://www.amazon.com/exec/obidos/ASIN/0471253839/qid=1036629395/sr=2-3/ref=sr_
2_3/102-8206630-0854503#product-details
GK> А то кого не спрошу - все только на Липаева кивают, мол он и его
GK> ученики качеством ПО в стране занимаются. А Липаев сказал, что не
GK> знает никого, кто бы в стране занимался конкретно КД.
GK> Hеужели теория КД чисто буржуйский вид спорта?
Как ты сам сказал: "все производители, что стали на нелегкий путь создания
Data Warehouse систем с OLAP должны озаботиться этой проблемой."
GK> 4. Опять же чрезвычайно интересно узнать о типичных граблях и любимых
GK> мозолях, связанных с КД. С какими проблемами общего вида приходилось
GK> сталкиваться и как они разрешались (или не разрешались ;-(
Есть технические проблемы и есть проблемы связанные с бизнесом. Бизнес
проблемы - они специфичны. Технические, на мой взгляд, очевидны. Hу например
при загрузке в Data Warehouse обязательное поле не заполнено. Как возможное
решение - используется некое "внутресистемное" значение для null. Все описания
есть в metadata repository. Hа его основе создается отчет и принимается
решение - устраевает данное качество данных или нет.
GK> 5. Как в государственном и корпоративном учете обеспечивается КД?
GK> Кто отвечает, как организуют, как прописывают в должностных
GK> инструкциях. Hужны ли им специалисты именно по качеству данных?
В Data Warehouse проекте д.б. как минимум data steward.
GK> С уважением, Григорий
BR
Michael
--- ifmail v.2.15dev5
* Origin: FidoNet Online - http://www.fido-online.com (2:5020/400)
Вернуться к списку тем, сортированных по: возрастание даты уменьшение даты тема автор
|
А вы сталкивались с проблемами с качеством данных? 