Senior Data Engineer

hace 2 semanas

San Isidro, Lima, Perú Bertoni Solutions A tiempo completo

Company Description

We are a multinational team of individuals who believe that with the right knowledge and approach, technology is the answer to the challenges that business face today.

We have been bringing this knowledge and approach to our customers since 2016, helping them translate technology into their success.


With Swiss roots and our own development team in Lima and throughout the region, we offer the best of both cultural areas: the talent and passion of Latin American professionals combined with Swiss organization skills and mindset.

As a Data Engineer, you will play a pivotal role in our organization's data ecosystem.

Your primary responsibilities will revolve around the collection, transformation, and management of large-scale data, leveraging a variety of tools and technologies to support business intelligence, data analytics, and machine learning initiatives.

This opportunity involves working as a full-time independent contractor in a completely remote capacity.

The client is in the process of forming a nearshore team and involved in manufacturing and marketing American consumer products worldwide.

While the hiring is facilitated through Bertoni, you will collaborate directly with the end client of our US-based partner.

Location:
The client is located in the United States, but the position is for 100% remote work.

Contract/Project Duration:
Initially 3 months with extension intend based on performance.

Time Zone and Schedule:
Full-time, Monday to Friday (8 hours per day, 40 hours per week), _Pacific Time Zone (PST)._

Interview steps:

  • Interview with Bertoni Solutions
  • Interview & live coding with partner
  • 1 or 2 interviews with the client

Key Responsibilities:

Data Processing and Modeling

  • Utilize a wide range of technologies, Python, SQL, for data processing and modeling.
  • Leverage experience with ETL tools in a cloudbased environment, such as Azure Data Factory or similar tools in other cloud providers, for efficient data processing.
  • Manage data stored in cloud storage locations, like Azure Data Lake Storage (ADLS) or similiter tools in other cloud providers for data extraction, transformation, and loading.

Data Loading and Transformation

  • Handle data preprocessing and loading of JSON files (realtime streaming), Parquet, and text files (batch) using cloudbased tools.
  • Employ parallel programming techniques to enhance data loading performance.
  • Implement Python programs following an objectoriented programming (OOP) approach.

Data Processing and Analysis

  • Perform big data analysis on POS (Point of Sale) and Ecommerce data, focusing on PySpark within a Databricks environment.

Qualifications

  • Bachelor's or master's degree in a related field (e.g., Computer Science, Data Engineering, or a relevant STEM discipline).
  • Experience in consumer products/retailrelated data, with a deep understanding of data sources, analytics, and specific challenges in this industry.
  • Proven experience in data engineering, including working with big data technologies such as Snowflake, Hadoop, and PySpark in a Databricks environment.
  • Strong proficiency in data processing and modeling with tools like Python, SQL.
  • Knowledge of database design, performance optimization, and ETL processes in cloudbased environments.
  • Experience working with cloud storage locations like Azure Data Lake Storage (ADLS) and ETL tools such as Azure Data Factory or equivalent in other cloud providers.
  • Familiarity with parallel programming for data processing and data loading.
  • Strong problemsolving skills and an ability to work collaboratively in a team.
  • Advanced written and spoken English.

Additional Information

  • Strong communication and collaboration skills to work effectively with crossfunctional teams, including data scientists, analysts, and business stakeholders.
  • Demonstrated ability to keep up to date with evolving data engineering and cloud technologies, showcasing a commitment to ongoing learning and professional development.
  • Strong attention to data quality and security best practices to ensure the integrity and privacy of sensitive data.
  • A commitment to documentation and maintaining clear, concise records of data engineering processes, making them accessible for team members.
  • Understanding of data governance and compliance, including knowledge of relevant regulations and best practices.
  • Excellent problemsolving skills and the ability to troubleshoot and optimize data pipelines for efficiency and performance.

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Fractal A tiempo completo

    Nos encontramos en búsqueda de un Data Engineer parauno de nuestros clientes del sector bancario, con el siguiente perfil:Somos Fractal Soluciones TI, una empresa peruana de consultoría en Gestión de Tecnología de la Información con más de 10 años en el mercado y con más de 70 clientes que confían en nosotros.Requisitos:¿Qué te hace ideal para la...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Tismart A tiempo completo

    En TiSmart estamos enteramente comprometidos con el crecimiento de nuestros clientes internos y externos, disfrutamos conceptualizando y desarrollando soluciones innovadoras que agreguen valor sus actividades y procesos. Contamos con un equipo multidisciplinario que nos permite co-crear y construir soluciones tecnológicas con una perspectiva cada vez más...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Tismart A tiempo completo

    En TiSmart estamos enteramente comprometidos con el crecimiento de nuestros clientes internos y externos, disfrutamos conceptualizando y desarrollando soluciones innovadoras que agreguen valor sus actividades y procesos. Contamos con un equipo multidisciplinario que nos permite co-crear y construir soluciones tecnológicas con una perspectiva cada vez más...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Tismart A tiempo completo

    En TiSmart estamos enteramente comprometidos con el crecimiento de nuestros clientes internos y externos, disfrutamos conceptualizando y desarrollando soluciones innovadoras que agreguen valor sus actividades y procesos. Contamos con un equipo multidisciplinario que nos permite co-crear y construir soluciones tecnológicas con una perspectiva cada vez más...

  • Integrity Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Integrity Engineer, Senior-(AUS000886)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Geochemical Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Geochemical Engineer, Senior-(AUS0007K4)Ausenco is a global company redefining what's possible. Our team is based across 26 offices in 14 countries, with projects in over 80 locations worldwide. Combining our deep technical expertise with a 30-year track record, we deliver innovative, value-add consulting studies, project delivery, asset operations and...

  • Electrical Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Electrical Engineer, Senior-(AUS000851)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Electrical Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Electrical Engineer, Senior-(AUS0007JX)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Electrical Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Electrical Engineer, Senior-(AUS0007WD)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Process Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Process Engineer, Senior-(AUS000882)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda expertise...

  • Civil Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Civil Engineer, Senior-(AUS00084G)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda expertise...

  • Structural Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Structural Engineer, Senior-(AUS000803)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Civil Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Civil Engineer, Senior-(AUS00085F)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda expertise...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Scotiabank A tiempo completo

    Gracias por tu interés en ser parte de Scotiabank Perú, apreciamos tu postulación. Estamos en la búsqueda de personas con talento que quieran crecer y lograr los objetivos de nuestra organización. Te deseamos mucho éxito dentro de este procesoMisión:El rol de Data Engineer en el equipo de Digital Data & Analytics en Scotiabank está diseñado para...

  • Junior Data Engineer de Riesgos de Crédito

    hace 2 semanas

    San Isidro, Lima, Perú Caja Arequipa A tiempo completo

    Somos Caja Arequipa, la Caja N° 1 del Perú, y nos encontramos en búsqueda del mejor talento para formar parte del equipo que está revolucionando las Microfinanzas en nuestro país, te invitamos a postular al puesto de Junior Data Engineer de Riesgos de Crédito¿Cuáles serán tus tareas?: Detectar riesgos crediticios de la cartera de créditos. Proveer...

  • Structural Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Structural Engineer, Senior-(AUS0007LO)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Structural Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Structural Engineer, Senior-(AUS0007WB)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Civil Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Civil Engineer, Senior-(AUS0007WC)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda expertise...

  • Mechanical Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Mechanical Engineer, Senior-(AUS0007WA)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Pacifico Seguros A tiempo completo

    Descripción del puesto: Generar valor a la organización mediante el desarrollo e implementación de soluciones de información. Asegurar la escalabilidad y sostenibilidad de las soluciones de información. Promover estándares y compartir el conocimiento adquirido en la comunidad de Data Engineers. Mantener al Chapter actualizado en las prácticas y...