Kan vara tillgänglig
(Uppdaterat 2024-03-14)Azure Data Architect @ Kolumbus AS
Randaberg, Norway
Modersmål Norwegian, English, Mellan Urdu
- Software Development
- Data Engineering
- Azure
Kompetenser (41)
Business Intelligence
Data Pipelines
STAR SCHEMA
C#
DATAMART
Blazor
GENERAL LEDGER
Microsoft SQL Server Analysis Services
DATA INTEGRATION
ONLINE ANALYTICAL PROCESSING
Data lineage
API
SQL Server Analysis Services
openAI
PERFORMANCE TUNING
Data Management
CONTINUOUS IMPROVEMENT
DATA MART
DATA SOURCES
FORENSIC
SQL SERVER INTEGRATION SERVICES
OLAP
BUSINESS REQUIREMENTS
DATASETS
METADATA
DATA WAREHOUSES
ETL
Power BI
Python
LOGGING
CODING
LOGISTICS
ERP
Risk Management
RETAIL
PRODUCTION PLANNING
Machine Learning
ADFS
Kafka
Microsoft SQL Server Integration Services
HANA
Professionell bakgrund
2021-09 - Pågående
* Sømløs batchbehandling og integrasjon med forskjellige Azure-tjenester * Bedre last tider har gitt rom for å kunne oppdatere viktige data kilder flere ganger til dagen * Metadata-drevet datalevering * Automatisert kildekontroll
2019-09 - Pågående
SQLFlow is a metadata-driven solution for constructing enterprise data warehouses and provides an expansive range of capabilities: * Dynamic Data Pipelines (Zero Coding). Schema and data pipelines for the data warehouse is generated dynamically based on the metadata specifications.
* Data ingestion and transformation * Efficient logging and monitoring * GDPR compatibility through Tokenization * Seamless integration with Azure services * Handling of source control systems * Automated data lineage calculation * Entity based execution.
* Improved parallelization yielding shorter load times.
* Semi-automated surrogate keys and star schema generation * Data provisioning driven by metadata.
* Automated adaptation of slowing changing dimensions * Excellent operational reports about data freshness and gaps Upcoming features: * Integration with GPT4 through OpenAI API and Embeddings * Integration with Google API for and automated GeoCoding * Handling Kafka Streams * Azure Data Studio Plugin SQLFlow illustrates my commitment to create practical, efficient, and scalable data management systems. Kolumbus AS opted to implement the framework in 2021, and the following tangibles have been achieved thus far: * Increased team productivity because of reduced development time for new data pipelines and management of existing ones * Azure cost savings were realized through better use of processing power and memory.
* Enhanced capabilities for auditing and tracking thanks to an automated lineage tracking in addition to forensic logging.
* Seamless batch processing and integration with various Azure Services * Metadata driven data provisioning to Dat Lake and data marts.
* Automated Source Control
2011-01 - 2021-11
* Økt driftseffektivitet og produktivitet gjennom implementering av automatiserte tjenester for gjentagende og komplekse data-engineering oppgaver.
* Lyktes med å utvikle flere brukervennlige dashbord som økte ansvarlighet og individuell prestasjon i hele selskapet.
* Anerkjent for å oppnå fremragende ytelsesnivåer i store dataintensive ETL-prosesser.
* Instrumentell i å forbedre pålitelighet, stabilitet, tilgjengelighet og brukervennlighet for datavarehus-funksjoner.
2021-02 - 2021-04
2018-06 - 2020-03
* Lyktes med å forbedre ytelsen til datavarehus med bedre parallellisering, bedre sporbarhet og redusert kompleksitet.
* Muliggjorde inntak av levende Kafka-datastrøm til datavarehuset.
* Forbedret CI/CD gjennom en dynamisk ETL-prosess drevet av metadata.
2008-01 - 2010-12
Mine tre år hos Sparebank 1 SR-Bank var en fantastisk reise der jeg hadde gleden av å samarbeide med noen briljante mennesker, og sammen la vi grunnlaget for en moderne og datadrevet bank.
ETL-rammeverket jeg utviklet i 2008, er fremdeles en av de sentrale modulene som håndterer prosesseringslogikken for flere tusen DWH-entiteter.
2008-01 - 2010-12
2002-01 - 2005-03
Det unge og utfordrende entreprenørmiljøet innenfor ProfitBase representerte en bratt læringskurve innen ulike rapporteringsdisipliner innen finans, salg, detaljhandel og helsevesen. En fantastisk mulighet til å oppdage kjærligheten i mitt liv: Data Engineering.
1998-01 - 2002-01
2001-01 - 2002-01
1998-01 - 2001-01
1995-01 - 1998-01
Introduksjonen til Adobe Cold Fusion utløste utviklerferdigheter for serverbaserte innholdsadministrasjonssystemer.
Anerkjennelser Verktøy, teknologi og metoder KATEGORI BESKRIVELSE Applikasjon Power BI, Fermat (Basel II), Actimize (Anti Money Laundering) Database og databaseverktøy SQL Server, SQL Server Integration Services (SSIS), SQL Server Analysis Services (SSAS), SQL Server Storage Compression, MDX, SQL Server CLR, SQL, Databasearkitektur, Databasemodellering, Azure Data Warehouse, Azure SQL Database, MySQL, Oracle, Pinecone, Rammeverk React Native, React Programmeringsspråk C#, Python, PowerShell, JavaScript, PL/SQL, T-SQL API OpenAI, Salesforce, GitHub, BitBucket, Twitter, Google Maps, Stable Diffusion ERP SAP, Axapta, Navision, Oracle Financials