Senior Data Engineer

hace 4 semanas

San Isidro, Perú Bertoni Solutions A tiempo completo

**Company Description**
We are a multinational team of individuals who believe that with the right knowledge and approach, technology is the answer to the challenges that business face today. We have been bringing this knowledge and approach to our customers since 2016, helping them translate technology into their success.

With Swiss roots and our own development team in Lima and throughout the region, we offer the best of both cultural areas: the talent and passion of Latin American professionals combined with Swiss organization skills and mindset.

As a Data Engineer, you will play a pivotal role in our organization's data ecosystem. Your primary responsibilities will revolve around the collection, transformation, and management of large-scale data, leveraging a variety of tools and technologies to support business intelligence, data analytics, and machine learning initiatives.

This opportunity involves working as a full-time independent contractor in a completely remote capacity. The client is in the process of forming a nearshore team and involved in manufacturing and marketing American consumer products worldwide. While the hiring is facilitated through Bertoni, you will collaborate directly with the end client of our US-based partner.

**Location**: The client is located in the United States, but the position is for 100% remote work.
**Contract/Project Duration**:Initially 3 months with extension intend based on performance.
**Time Zone and Schedule**: Full-time, Monday to Friday (8 hours per day, 40 hours per week), _Pacific Time Zone (PST)._

**Interview steps**:

- Interview with Bertoni Solutions
- Interview & live coding with partner
- 1 or 2 interviews with the client

**Key Responsibilities**:
**Data Processing and Modeling**
- Utilize a wide range of technologies, Python, SQL, for data processing and modeling.
- Leverage experience with ETL tools in a cloud-based environment, such as Azure Data Factory or similar tools in other cloud providers, for efficient data processing.
- Manage data stored in cloud storage locations, like Azure Data Lake Storage (ADLS) or similiter tools in other cloud providers for data extraction, transformation, and loading.

**Data Loading and Transformation**
- Handle data preprocessing and loading of JSON files (real-time streaming), Parquet, and text files (batch) using cloud-based tools.
- Employ parallel programming techniques to enhance data loading performance.
- Implement Python programs following an object-oriented programming (OOP) approach.

**Data Processing and Analysis**
- Perform big data analysis on POS (Point of Sale) and E-commerce data, focusing on PySpark within a Databricks environment.

**Qualifications**
- Bachelor’s or master’s degree in a related field (e.g., Computer Science, Data Engineering, or a relevant STEM discipline).
- Experience in consumer products/retail-related data, with a deep understanding of data sources, analytics, and specific challenges in this industry.
- Proven experience in data engineering, including working with big data technologies such as Snowflake, Hadoop, and PySpark in a Databricks environment.
- Strong proficiency in data processing and modeling with tools like Python, SQL.
- Knowledge of database design, performance optimization, and ETL processes in cloud-based environments.
- Experience working with cloud storage locations like Azure Data Lake Storage (ADLS) and ETL tools such as Azure Data Factory or equivalent in other cloud providers.
- Familiarity with parallel programming for data processing and data loading.
- Strong problem-solving skills and an ability to work collaboratively in a team.
- Advanced written and spoken English.

**Additional Information**
- Strong communication and collaboration skills to work effectively with cross-functional teams, including data scientists, analysts, and business stakeholders.
- Demonstrated ability to keep up to date with evolving data engineering and cloud technologies, showcasing a commitment to ongoing learning and professional development.
- Strong attention to data quality and security best practices to ensure the integrity and privacy of sensitive data.
- A commitment to documentation and maintaining clear, concise records of data engineering processes, making them accessible for team members.
- Understanding of data governance and compliance, including knowledge of relevant regulations and best practices.
- Excellent problem-solving skills and the ability to troubleshoot and optimize data pipelines for efficiency and performance.

  • Data Engineer

    hace 4 días

    San Isidro, Perú Fractal A tiempo completo

    Nos encontramos en búsqueda de un Data Engineer parauno de nuestros clientes del sector bancario, con el siguiente perfil: Somos Fractal Soluciones TI, una empresa peruana de consultoría en Gestión de Tecnología de la Información con más de 10 años en el mercado y con más de 70 clientes que confían en nosotros. **Requisitos**: ¿Qué te hace ideal...

  • Senior Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Bertoni Solutions A tiempo completo

    Company DescriptionWe are a multinational team of individuals who believe that with the right knowledge and approach, technology is the answer to the challenges that business face today. We have been bringing this knowledge and approach to our customers since 2016, helping them translate technology into their success.With Swiss roots and our own development...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Fractal A tiempo completo

    Nos encontramos en búsqueda de un Data Engineer parauno de nuestros clientes del sector bancario, con el siguiente perfil:Somos Fractal Soluciones TI, una empresa peruana de consultoría en Gestión de Tecnología de la Información con más de 10 años en el mercado y con más de 70 clientes que confían en nosotros.Requisitos:¿Qué te hace ideal para la...

  • Integrity Engineer, Senior

    hace 4 semanas

    San Isidro, Perú Ausenco A tiempo completo

    **Integrity Engineer, Senior** **-** **(** **AUS000886** **)** Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas. Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta....

  • Data Engineer

    hace 4 semanas

    San Miguel, Perú capacitate rys A tiempo completo

    Empresa del rubro _automotriz_ se encuentra en búsqueda de un **DATA ENGINEER** para su sede en **SAN MIGUEL.** **Requisitos**: Egresado de Ing. Sistemas o Ing. Industrial. Mínimo 2 años de experiência trabajando en áreas de BI o afines. Experiência en proyectos de data y/o reporting (deseable conocimiento de Data Lake y Big Data) Manejo de...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Tismart A tiempo completo

    En TiSmart estamos enteramente comprometidos con el crecimiento de nuestros clientes internos y externos, disfrutamos conceptualizando y desarrollando soluciones innovadoras que agreguen valor sus actividades y procesos. Contamos con un equipo multidisciplinario que nos permite co-crear y construir soluciones tecnológicas con una perspectiva cada vez más...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Tismart A tiempo completo

    En TiSmart estamos enteramente comprometidos con el crecimiento de nuestros clientes internos y externos, disfrutamos conceptualizando y desarrollando soluciones innovadoras que agreguen valor sus actividades y procesos. Contamos con un equipo multidisciplinario que nos permite co-crear y construir soluciones tecnológicas con una perspectiva cada vez más...

  • Data Engineer

    hace 2 semanas

    San Isidro, Lima, Perú Tismart A tiempo completo

    En TiSmart estamos enteramente comprometidos con el crecimiento de nuestros clientes internos y externos, disfrutamos conceptualizando y desarrollando soluciones innovadoras que agreguen valor sus actividades y procesos. Contamos con un equipo multidisciplinario que nos permite co-crear y construir soluciones tecnológicas con una perspectiva cada vez más...

  • Senior Process Engineer

    hace 3 semanas

    San Isidro, Perú Lycopodium A tiempo completo

    Process Engineer - EPCM **Lycopodium **is currently recruiting for a Senior Process Engineer to join our growing Process team in Lima, Peru. Reporting to the Manager of Process the Senior Process Engineer will be responsible for the delivery of accurate, professional and compliant process study and design deliverables using Company approved systems and...

  • Electrical Engineer, Senior

    hace 4 semanas

    San Isidro, Perú Ausenco A tiempo completo

    **Electrical Engineer, Senior** **-** **(** **AUS0007WD** **)** Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas. Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta....

  • Process Engineer, Senior

    hace 2 meses

    San Isidro, Perú Ausenco A tiempo completo

    **Process Engineer, Senior** **-** **(** **AUS000882** **)** Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas. Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con...

  • Electrical Engineer, Senior

    hace 2 meses

    San Isidro, Perú Ausenco A tiempo completo

    **Electrical Engineer, Senior** **-** **(** **AUS000851** **)** Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas. Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta....

  • Electrical Engineer, Senior

    hace 4 semanas

    San Isidro, Perú Ausenco A tiempo completo

    **Electrical Engineer, Senior** **-** **(** **AUS000851** **)** Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas. Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta....

  • Data Engineer

    hace 2 semanas

    Provincia de San Miguel, Perú capacitate rys A tiempo completo

    Empresa del rubro _automotriz_ se encuentra en búsqueda de un DATA ENGINEER para su sede en SAN MIGUEL.Requisitos:Egresado de Ing. Sistemas o Ing. Industrial.Mínimo 2 años de experiência trabajando en áreas de BI o afines.Experiência en proyectos de data y/o reporting (deseable conocimiento de Data Lake y Big Data)Manejo de herramientas de reporting...

  • Civil Engineer, Senior

    hace 4 semanas

    San Isidro, Perú Ausenco A tiempo completo

    **Civil Engineer, Senior** **-** **(** **AUS00085F** **)** Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas. Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con...

  • Integrity Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Integrity Engineer, Senior-(AUS000886)Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas.Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta. Con nuestra profunda...

  • Data Engineer

    hace 4 semanas

    San Isidro, Perú Tismart A tiempo completo

    En TiSmart estamos enteramente comprometidos con el crecimiento de nuestros clientes internos y externos, disfrutamos conceptualizando y desarrollando soluciones innovadoras que agreguen valor sus actividades y procesos. Contamos con un equipo multidisciplinario que nos permite co-crear y construir soluciones tecnológicas con una perspectiva cada vez más...

  • Geochemical Engineer, Senior

    hace 2 semanas

    San Isidro, Lima, Perú Ausenco A tiempo completo

    Geochemical Engineer, Senior-(AUS0007K4)Ausenco is a global company redefining what's possible. Our team is based across 26 offices in 14 countries, with projects in over 80 locations worldwide. Combining our deep technical expertise with a 30-year track record, we deliver innovative, value-add consulting studies, project delivery, asset operations and...

  • Structural Engineer, Senior

    hace 4 semanas

    San Isidro, Perú Ausenco A tiempo completo

    **Structural Engineer, Senior** **-** **(** **AUS0007WB** **)** Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas. Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta....

  • Structural Engineer, Senior

    hace 4 semanas

    San Isidro, Perú Ausenco A tiempo completo

    **Structural Engineer, Senior** **-** **(** **AUS0007LO** **)** Si eres como nosotros, no tienes demasiado tiempo para la forma como siempre se han hecho las cosas. Ausenco es una compañía global que está redefiniendo lo que es posible. Nuestro equipo está basado en 26 oficinas en 14 países, con proyectos en más de 80 ubicaciones en todo el planeta....