Big Data Architect
Recrutement Big Data Architect chez Confiz
Présentation de l’entreprise
Confiz est une entreprise innovante, comptant plus de 700 professionnels, qui se spécialise dans le développement de projets et de produits d’entreprise avancés. Son portefeuille client comprend des entreprises du classement Fortune 100 dans le secteur de la vente au détail, des startups fintech en forte croissance, ainsi que diverses chaînes de magasins. Confiz se distingue non seulement par ses réalisations techniques, mais également par sa culture organisationnelle qui favorise la collaboration et l’apprentissage continu.
Description du poste
Confiz recherche un Big Data Architect ayant une solide expérience en architecture de données et un esprit d’innovation pour renforcer son équipe d’experts en analytique. Le candidat retenu sera responsable de l’expansion et de l’optimisation de l’architecture des données, en veillant à l’efficacité des flux de données et des processus de collecte pour plusieurs équipes fonctionnelles.
Responsabilités clés
- Créer et maintenir des architectures de pipeline de données optimales
- Assembler des ensembles de données complexes respectant les exigences fonctionnelles et non fonctionnelles.
- Identifier et mettre en œuvre des améliorations internes des processus : automatisation des processus manuels, optimisation des livraisons de données, redéfinition de l’infrastructure pour une plus grande évolutivité.
- Construire l’infrastructure nécessaire pour une extraction, transformation et chargement efficaces des données issues de diverses sources.
- Développer des outils d’analyse pour tirer des enseignements exploitables concernant l’acquisition client et les performances opérationnelles.
- Collaborer avec des parties prenantes, y compris des architectes de données et des équipes produit, pour résoudre des problèmes techniques liés aux données.
Exigences
- 10 ans d’expérience minimum en conception et développement, dont 6 ans minimum avec des technologies de big data.
- Maîtrise d’un langage orienté objet ou fonctionnel tel que Python, Java ou Scala.
- Expérience avec des outils de big data comme Spark et Kafka.
- Connaissance des bases de données relationnelles (SQL Server, Postgres) et NoSQL (Cassandra).
- Compétences en outils de gestion de workflow de données comme Airflow.
- Expérience avec des services d’analyse de données en cloud comme GCP, Azure ou AWS.
- Connaissances en systèmes de traitement des flux tels que Spark-Streaming ou Flink.
- Connaissance des pratiques de sécurité des données, y compris le chiffrement.
- Capacités analytiques solides liées à des ensembles de données non structurées.
Pourquoi rejoindre Confiz ?
Confiz est certifiée ISO selon plusieurs normes, ce qui témoigne de son engagement envers la qualité, la sécurité et l’environnement. L’entreprise offre un cadre de travail où la culture de l’apprentissage, l’innovation et le bonheur au travail sont des priorités. Les employés de Confiz utilisent des technologies à la pointe tout en contribuant au succès de l’entreprise et de leur développement professionnel.
Informations pratiques
Salaire attendu : À définir lors de l’entretien
Localisation : Lahore, Punjab
Date de publication de l’annonce : Mercredi, 14 Mai 2025
📅 Date de publication de l’offre : Wed, 14 May 2025 22:05:16 GMT
🏢 Entreprise : Confiz
📍 Lieu : Lahore, Punjab
💼 Intitulé du poste : Big Data Architect
💶 Rémunération proposée :
📝 Description du poste : We are looking for a savvy Data Architect to join our growing team of analytics experts. The hire will be responsible for expanding and optimizing our data and data pipeline architecture, as well as optimizing data flow and collection for cross functional teams.Responsibilities:
- Create and maintain optimal data pipeline architecture,
- Assemble large, complex data sets that meet functional / non-functional business requirements.
- Identify, design, and implement internal process improvements: automating manual processes, optimizing data delivery, re-designing infrastructure for greater scalability, etc.
- Build the infrastructure required for optimal extraction, transformation, and loading of data from a wide variety of data sources using SQL and Azure/GCP ‘big data’ technologies.
- Build analytics tools that utilize the data pipeline to provide actionable insights into customer acquisition, operational efficiency and other key business performance metrics.
- Work with stakeholders including the Data Architect, Product Owner, Data and Design teams to assist with data-related technical issues and support their data infrastructure needs.
Requirements:
- Minimum 10+ years of design & development experience with at least 6 years of experience with big data technologies.
- Proficient in one of the object-oriented and functional languages: Python, Java, Scala, etc.
- Experience with big data tools: Spark, Kafka, etc.
- Experience with relational SQL like SQL Server, Postgres and NoSQL databases e.g Cassandra etc.
- Experience with data pipeline and workflow management tools: Airflow, etc.
- Experience with one of cloud data analytic services GCP/Azure/AWS.
- Experience with stream-processing systems: Spark-Streaming, Flink etc.
- Experience in ensuring data quality in big data pipelines. Unit testing of big data pipelines.
- Advanced working SQL Analytical Queries knowledge and experience working with relational databases, query authoring (SQL) as well as working familiarity with a variety of databases.
- Experience building and optimizing ‘big data’ data pipelines, architectures and data sets.
- Experience performing root cause analysis on internal and external data and processes to answer specific business questions and identify opportunities for improvement.
- Best Security practice in Data computing, including encryption of sensitive data, encryption at rest and encryption in flight.
- Strong analytic skills related to working with unstructured datasets.
- A successful history of manipulating, processing and extracting value from large disconnected datasets.
- Working knowledge of message queuing, stream processing, and highly scalable ‘big data’ data stores.
- Experience supporting and working with cross-functional teams in a dynamic environment
We have an amazing team of 700+ individuals working on highly innovative enterprise projects & products. Our customer base includes Fortune 100 retail and CPG companies, leading store chains, fast-growth fintech, and multiple Silicon Valley startups.What makes Confiz stand out is our focus on processes and culture. Confiz is ISO 9001:2015 (QMS), ISO 27001:2022 (ISMS), ISO 20000-1:2018 (ITSM) and ISO 14001:2015 (EMS) Certified. We have a vibrant culture of learning via collaboration and making workplace fun.People who work with us work with cutting-edge technologies while contributing success to the company as well as to themselves.To know more about Confiz Limited, visit:
🔎 Offre d’emploi vérifiée et enrichie selon la ligne éditoriale de l’Association Artia13 : éthique, inclusion, transparence et vigilance contre les annonces trompeuses.
🌍 Retrouvez d’autres offres sur artia13.world