Arun A. Profile

0,0

(0 omdömen)

Du följer nu

Fel vid följande av användare.

Den här användaren tillåter inte att andra användare följer dem.

Du följer redan den här användaren.

Din medlemskapsplan låter dig endast följa 0 användare. Uppgradera här.

Du har avföljt

Fel vid sluta följa användare.

Du har nu rekommenderat

Fel vid rekommendation vid användare.

Något gick fel. Var god uppdatera sidan och försök igen.

Email verifierad.

$25 USD /timme

lucknow,

india

$25 USD /timme

Datum, tid och plats: 12:29 em

Gick med november 20, 2020

0 Rekommendationer

Arun A.

@arunwal

0,0

(0 omdömen)

0,0

$25 USD /timme

lucknow,

india

$25 USD /timme

N/A

Slutförda jobb

N/A

Inom budget

N/A

Inom tid

N/A

Återanställningsgrad

Data Engineer

Data Engineer with over 5 years of extensive hands on experience designing cloud based Data solutions and related fields. -> I have expertise in following. Programming Languages - Python, SQL Big Data - spark, Pyspark, spark SQL, Hadoop, Hive, Kafka Azure - Azure Databricks, Azure Data Factory, Azure Data Lake, Azure SQL Database, Azure synapse AWS - AWS S3, AWS EMR, AWS Redshift Scheduling Tools - Airflow -> Certification: Microsoft Certified Azure Data Engineer, Microsoft Azure Data Fundamentals, AWS Certified Cloud Practitioner -> Below are few of my responsibilities. Designed and Developed end-to-end Enterprise Data Analytics Solution on Azure native services like Azure Data Factory, Azure Databrick (pyspark, sparkSQL) and Azure synapse Analtyics. Developed a API for data cleaning, metadata validation on large scale data using python and Spark(Pyspark) on Azure Databricks, which helped in reducing ELT pipeline computation time by a factor of 10. Build and maintain scalable ETL pipelines on AWS Glue, to extract data from multiple legacy source systems( SQL, NoSQL), loading into AWS S3, AWS dynamoDB and analyze data using interactive queries on AWS Athena.

Visa alla Python Developers i India

Kontakta Arun A. om ditt uppdrag

Logga in för att diskutera detaljer i chatten.

Recensioner

Ändringar sparade

Inga recensioner att se här!

Erfarenhet

Infosys

sep. 2016 - Nuvarande

Build and maintain enterprise data lake and scalable ELT Pipelines using Azure Data Factory and Azure Data Lake, for real-time aggregation of large amounts of data from various sources that includes streaming and batch data into a data lake. Developed a API for data cleaning, metadata validation on large scale data using Python and Spark(Pyspark,sparkSQL) on Azure Databricks, which helped in reducing ELT pipeline computation time by a factor of 10.