4th Platform Data Engineer

Desarrollo Web y Móvil / Otros Web y Móvil

Detalles del trabajo

  • Publicación: hace 2 meses y 17 días
  • contratación cerrada
  • Tipo de trabajo: oferta de empleo
  • Ubicación: España, Madrid
  • Tipo de empleo: Contrato Indefinido
  • Salario: sin especificar
  • Experiencia requerida:
  • Formación: Grado o Licenciatura

Descripción de la oferta

Descripción de la ubicación: Madrid, ES

 

Descripción del papel

 

Ingenieros de datos son los diseñadores, constructores y gestores de la infraestructura de información. Desarrollan la arquitectura y los procesos que ayuda a analizar y procesar datos, que garantizan la calidad de los datos, y mantener estructuras de base de datos que se adaptan a la visualización ana herramientas analíticas.

 

 

Ingenieros de datos están involucrados en el diseño de soluciones de datos grandes, debido a la experiencia que tienen con las tecnologías basadas en Hadoop como Sqoop, Canal de flujo, Colmena, MapReduce, así como las tecnologías tradicionales de almacenamiento de datos.

 

Los ingenieros de grandes volúmenes de datos también deben tener la capacidad de arquitecto de sistemas distribuidos altamente escalables, utilizando diferentes herramientas de código abierto. Él o ella debe entender cómo funcionan los algoritmos y tienen experiencia en la construcción de algoritmos de alto rendimiento.

Responsabilidades:

  • Construir conjuntos de datos de diferentes fuentes de información que definen los modelos de datos más adecuadas.
  • Transformar los datos para la generación de indicadores y las dimensiones de interés para el servicio y crear / gestionar los repositorios de datos en la infraestructura de datos grandes.
  • Calidad de datos: Generar controles automáticos que validan la calidad e integridad de los datos.
  • los datos de autoservicio: Creación de mecanismos basados ??en la web para acceder a los datos procesados ??por los usuarios no técnicos.
  • La construcción de sistemas de tratamiento de datos con Hadoop y Hive utilizando Java o Python debe ser de conocimiento común a la gran ingeniero de datos.
  • Él o ella debe ser capaz de decidir sobre las necesidades de diseño de hardware y software necesarios y actuar de acuerdo con las decisiones. El ingeniero de datos tan grande debe ser capaz de desarrollar prototipos y pruebas de concepto para las soluciones seleccionadas.

 

 

 

 

Calificaciones requeridas:

 

Debe: Linux, Python, Oracle / Teradata, ETL.

Debe ser una muy buena persona organizada, capaz de definir y comprometidos con la creación de un modelo de datos aceptado por un gran número de diferentes grupos de interés.

El buen entendimiento de la colmena en un nivel de administración, creación de bases de datos, la partición, bucketing, la optimización de consultas.

La administración del sistema, configuración de red y de secuencias de comandos de Linux.

Manos en la experiencia en el ecosistema Hadoop, especialmente sobre las tecnologías para la ingestión de datos y orquestación (Apache Oozie)

La experiencia en la evaluación de calidad de los datos mediante informes automáticos

Python o un Languaje similar para automatización y transformación de datos

 

Es bueno tener

herramientas de reporte

Las estadísticas básicas y el conocimiento de la máquina de aprendizaje

 

 

 

Experiencia:

 

Debe: experiencia en el análisis de bases de datos, creación y administración de esquema, así como experimentar haciendo extracto, transformación y carga de proyectos en el entorno de datos grande. 3 Año de experiencia en Python (necesidad de demostrarlo)

1 año de experiencia en Teradata / / gestión y optimización de Oracle MySQL

1 año de experiencia utilizando entornos de grandes volúmenes de datos

De 1 año de la administración de sistemas Unix y scriping

 

Es bueno tener

R idioma

la experiencia de datos Científico

 

 

 

 

 

 

 

 

 

 


Regístrate para ver los detalles del proyecto

Habilidades requeridas

Acerca de la empresa

Telefónica

Telefonica
(0) | +50 trabajos publicados
España España
Junio de 2016

¿Tienes comentarios, ideas? ¿Has detectado errores, defectos? ¡Háznoslos llegar a nubelo!