Aký je proces získavania údajov?

Proces získavania údajov zahŕňa niekoľko krokov a špecifiká silne závisia od toho, kde sú údaje uložené (databáza, systém súborov, cloudové úložisko atď.) A nástroje používané na prístup k nemu. Všeobecný prehľad však vyzerá takto:

1. Zasvätenie žiadosti: Začína sa požiadavka na získanie údajov. To by mohlo byť:

* Interakcia používateľa: Používateľ klikne na tlačidlo, predloží formulár alebo zadá dotaz do vyhľadávacieho panela.

* Programová požiadavka: Aplikácia odošle dotaz do databázy alebo iného zdroja údajov.

* Plánovaná úloha: Systém automaticky načíta údaje v vopred určenom čase.

2. Formulácia dopytu (ak je to možné): Žiadosť je preložená do dotazu, ktorý určuje, aké údaje sa majú načítať. To často zahŕňa:

* Zadanie zdroja údajov: Identifikácia konkrétneho súboru, tabuľky databázy alebo iné umiestnenie údajov.

* Definovanie kritérií výberu: Naznačujúc, ktoré dátové prvky sa majú načítať na základe určitých podmienok (napr. Získanie všetkých zákazníkov z konkrétneho regiónu alebo všetky objednávky zadané po určitom dátume).

* Zadanie triedenia a objednávania: Definovanie toho, ako by sa mali vyzdvihnuté údaje zoradiť (napr. Podľa dátumu, abecedne).

* Obmedzenie výsledkov: Zadanie počtu záznamov na získanie (stránka).

3. Spracovanie dotazov: Dotaz je spracovaný systémom správy údajov. To zahŕňa:

* analyzovanie dotazu: Systém interpretuje dotaz, aby pochopil, aké údaje sú potrebné a ako k nemu získať prístup.

* Optimalizácia dotazu: Systém môže optimalizovať dotaz na zlepšenie účinnosti (napr. Výber najúčinnejšej prístupovej cesty k údajom).

* Prístup k údajom: Systém pristupuje k údajom z úložiska. To by mohlo zahŕňať čítanie zo súborov, prístup k indexom v databáze alebo získanie údajov zo služby Cloud Storage Service.

* Filtrovanie a triedenie údajov: Systém používa všetky kritériá filtrovania alebo triedenia uvedené v dotaze.

4. Získavanie údajov a prenos: Požadované údaje sa získajú z úložiska a prenášajú sa do žiadnej entity. To často zahŕňa:

* Formátovanie údajov: Dáta sú naformátované do vhodnej reprezentácie (napr. JSON, XML, CSV alebo štruktúrovaná tabuľka).

* prenos údajov: Formátované údaje sa prenášajú do aplikácie alebo používateľa, ktorý žiadosť inicioval. Môže to zahŕňať sieťovú komunikáciu, prenos súborov alebo prístup k pamäti.

5. Prezentácia údajov (ak je to použiteľné): Získané údaje sú uvedené používateľovi alebo aplikácii. To by mohlo zahŕňať:

* Zobrazovanie údajov v používateľskom rozhraní: Prezentácia údajov v tabuľkách, grafoch alebo iných vizuálnych formátoch.

* spracovanie údajov v aplikácii: Použitie získaných údajov na výpočty, analýzu alebo iné úlohy spracovania.

Príklad: Predstavte si, že hľadáte „Apple“ na webovej stránke elektronického obchodu.

1. Žiadosť: Do vyhľadávacieho panela zadáte „Apple“ a stlačte Enter.

2. dotaz: Táto webová stránka prekladá vaše vyhľadávanie do dotazu (napr. „Vyberte * z produktov, kde je názov ako„%Apple%““).

3. spracovanie: Databáza prijíma dotaz, optimalizuje ju a načíta všetky záznamy o produktoch obsahujúcich „Apple“ vo svojom mene.

4. vyhľadávanie: Relevantné údaje o produkte (názov, cena, obrázok atď.) Sa získa a naformátujú ako JSON.

5. Prezentácia: Webová stránka zobrazuje výsledky vyhľadávania zobrazujúce príslušné produkty.

Zložitosť získavania údajov sa výrazne líši v závislosti od mierky a štruktúry údajov, typu použitej databázy alebo úložiska a sofistikovanosti dotazu. Jednoduché čítania súborov sa výrazne líšia od zložitých databázových dopytov týkajúcich sa spojenia a agregácie.

• Predchádzajúca strana: Čo je späť? 
• Ďalšia strana: V prípade objavenia zlyhania systému alebo skorumpovaného súboru, čo radšej zálohujete, ale pôvodné miesto v počítači?