Pagina se încarcă... vă rugăm așteptați!



Afișarea paginii întârzie? Clic aici
 
Pagina de start a forumului razvan.bocu.ro / forum.bocu.ro razvan.bocu.ro / forum.bocu.ro
IT si diverse
 
 AcasăAcasă   LinkuriLinkuri   FAQFAQ   CăutareCăutare   MembriMembri   GrupuriGrupuri   AlbumAlbum   ÎnregistrareÎnregistrare 
 ProfilProfil   SudokuSudoku    Mesaje privateMesaje private   Hartă Site(pseudo)Hartă Site(pseudo)    AutentificareAutentificare 

Data Engineering

 
Crează un subiect nou   Răspunde la subiect    Pagina de start a forumului razvan.bocu.ro / forum.bocu.ro -> Discutii cu specific IT
Subiectul anterior :: Subiectul următor  
Autor Mesaj
ami95
Novice
Novice


Vârsta: 29
Data înscrierii: 29/Feb/2016
Mesaje: 2
Cuvinte scrise: 256
Sexul: Masculin
Locație: Brasov
hu.gif


MesajTrimis: Lun Noi 20, 2023 2:03 pm    Titlul subiectului: Data Engineering Răspunde cu citat (quote)

Salutări stimați mebrii ai Acestui minunat Forum,

Aș avea o întrebare legată de Data Engineering. Este mai mult vorba despre o aplicație practică.
Să presupunem că avem o fabrică de ceva, cu trei mari baze de date.
Fiecare Bază de Date, să presupunem că ar corespunde câte unui nivel din piramida automatizării:
1. ERP/SAP «enterprise»
2. MES «management»
3. DCS/PLC «control»

Am vrea să construim un sistem prin intermediul căruia să putem adresa Query-uri tuturor celor trei baze de date
și să le livrăm mai departe la diverși consumatori, spre exemplu, aplicații ce generează rapoarte sau expoziții grafice.
Aceste date nu trebuiesc neapărat salvate, sau dacă da, cel mult vor fi salvate pe un server ce se va «autoșterge» ciclic
fie la fie la un «trigger» anume, fie la un interval de timp definit.

Există conceptele de ETL, ELT, Data Pipeline sau Data Virtualization cu care am încercat să mă fac familiar.
Am în vizor și un set de tehnologii care, cred eu, sunt relevante pentru această sarcină: Apache Kafka/NiFi/Spark,
Snowflake, AspenTech Immation sau Talend.

P.S. Atașez acestui post o imagine cu o schemă grafică a sarcinii pe care vreau să o îndeplinesc.
P.P.S. Iertați-mi vă rog eventualele ambiguități sau greșeli în exprimare. Ele se datorează nefamiliarității mele cu acest subiect.
P.P.P.S. Nu îmi vine să cred cât de des îmi reproșez, cu fiecare an care trece chiar mai frecvent «De ce nu am fost mai atent la ore în Facultate» Smile

_________________
^^
\_/
Sus
ami95 este deconectat Vezi profilul utilizatorului Trimite mesaj privat
Afișează mesajele pentru a le previzualiza:   
Crează un subiect nou   Răspunde la subiect    Pagina de start a forumului razvan.bocu.ro / forum.bocu.ro -> Discutii cu specific IT Ora este GMT + 2 ore
Pagina 1 din 1

 
Mergi direct la:  
Nu puteți crea un subiect nou în acest forum
Nu puteți răspunde în subiectele acestui forum
Nu puteți modifica mesajele proprii din acest forum
Nu puteți șterge mesajele proprii din acest forum
Nu puteți vota în chestionarele din acest forum
Nu puteți atașa fișiere în acest forum
Nu puteți descărca fișiere în acest forum
Referință subiect (Stil MLA)
"Data Engineering." Mesaj online. Lun Noi 20, 2023 2:03 pm. razvan.bocu.ro / forum.bocu.ro.
Vin Iul 19, 2024 3:59 pm. < http://forum.bocu.ro/viewtopic.php?t=77634 >.




Securitate forum

115989 Atacuri blocate

Powered by BOCU.ro © 2001, 2005 phpBB Group
Varianta în limba română: Romanian phpBB online community / Razvan Bocu <<< razvan@bocu.ro >>>

Uptime server: 80 zile, 21 ore, 15 minute | Încărcare medie: 0.24, 0.30, 0.44

Server uptime(last month)