Gurpreet Singh
Suchst Du einen anderen Gurpreet Singh?
Fähigkeiten und Kenntnisse
Werdegang
Berufserfahrung von Gurpreet Singh
- Bis heute 2 Jahre und 6 Monate, seit Nov. 2022
Big Data Engineer
Bank of New York
• Designed and optimised data pipelines using PySpark to process large-scale data from MongoDB, SQL Server, Oracle, various file formats (Parquet, Avro, ORC, and CSV), and Azure Blob Storage. • Collaborated with stakeholders like Bloomberg and Blackrock to fetch and process financial data. • Improved data pipeline efficiency by 30% through DataFrame caching and Spark optimisation techniques. • Developed automated data validation scripts, ensuring 99.9% data accuracy.
- 1 Jahr und 7 Monate, Mai 2021 - Nov. 2022
Big Data Engineer
IBM India
• Developed PySpark-based ETL workflows to transform raw data into structured insights for American Express. • Led data localisation projects, ensuring compliance with India-specific regulations. • Optimised Spark jobs by tuning configurations, data partitioning, and caching techniques, reducing execution time by 40%. • Collaborated with cross-functional teams to deliver scalable data engineering solutions.
- 8 Jahre und 11 Monate, Juli 2012 - Mai 2021
Data Engineer
Tata Consultancy Services India
• Designed and developed ETL pipelines using PySpark for clients including NatWest and Deutsche Bank. • Processed large volumes of structured & unstructured data (CSV, JSON, Parquet, Avro). • Enhanced pipeline performance by implementing Spark optimisations and caching techniques. • Developed PL/SQL scripts, stored procedures, and triggers for TCS’s Corporate Finance system. • Assisted Java development teams in writing optimized SQL queries for application integration.
XING Mitglieder mit ähnlichen Profilangaben
XING – Das Jobs-Netzwerk
Über eine Million Jobs
Entdecke mit XING genau den Job, der wirklich zu Dir passt.
Persönliche Job-Angebote
Lass Dich finden von Arbeitgebern und über 20.000 Recruiter·innen.
22 Mio. Mitglieder
Knüpf neue Kontakte und erhalte Impulse für ein besseres Job-Leben.
Kostenlos profitieren
Schon als Basis-Mitglied kannst Du Deine Job-Suche deutlich optimieren.