Data Engineer

  • Компания: Competo
  • Город Казахстан, Алматы
  • Зарплата:
  • Размещено: 2025-06-16 10:03:18

Описание

We are seeking a Data Engineer to build and maintain Azure-based data pipelines and systems that drive analytics, machine learning, and product features. You will work with large-scale datasets, optimize performance, and ensure data is structured, accessible, and reliable.

This role is ideal for an engineer who enjoys hands-on technical work, solving real-world data challenges, and scaling infrastructure using Azure-native services.

Key Responsibilities

  • Design, develop, and optimize ETL/ELT pipelines using Azure Data Factory, Synapse Pipelines, or Databricks.
  • Maintain and evolve data lakes (ADLS Gen2), data warehouses (Synapse Analytics), and relational databases (Azure SQL, Cosmos DB).
  • Implement data ingestion from APIs, event streams, files, and operational systems.
  • Develop data models optimized for analytics and ML workflows.
  • Collaborate with analytics, science, and governance teams to deliver trusted, documented datasets.
  • Ensure efficient pipeline orchestration and scheduling using Azure Data Factory or similar tools.
  • Optimize cloud usage for cost-efficiency and performance.

Requirements

Must-Have:

  • 1–5 years of experience in Data Engineering, Software Engineering, or related fields.
  • Strong skills in SQL and Python for data processing and scripting.
  • Hands-on experience with Azure Data Services:
  • Azure Data Factory (ADF)
  • Azure Synapse Analytics
  • Azure Data Lake Storage Gen2 (ADLS)
  • Azure SQL Database / Cosmos DB
  • Understanding of data modeling (star/snowflake schemas), partitioning, and performance tuning.
  • Familiarity with CI/CD pipelines and version control systems (e.g., Git, Azure DevOps).

Nice-to-Have:

  • Experience with Azure Databricks and Delta Lake for large-scale processing.
  • Exposure to event-driven architectures (Azure Event Hubs, Kafka) and real-time streaming.
  • Knowledge of dbt for transformation and modular ELT pipelines.
  • Familiarity with Google Big Query

Похожие вакансии

Lead Business Data Analyst

... 2 years of experience in data analytics, data modelling, data integration and data visualization. Strong communication skills and stakeholders management. Strong knowledge and skills in data modelling tools and languages, such ...
Компания: Неткрэкер Текнолоджи Казахстан Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Business Data Analyst

... 2 years of experience in data analytics, data modelling, data integration and data visualization. Strong communication skills and stakeholders management. Strong knowledge and skills in data modelling tools and languages, such ...
Компания: Неткрэкер Текнолоджи Казахстан Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Data Engineer

... нашу команду мы ищем крутого Data Engineer, который умеет не только строить ...
Компания: Khan Group Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Data Engineer

... SQL-движками. Реализация решений для data lake и хранилищ с открытыми ... и Apache Iceberg для реализаций data lake. Мы предлагаем: График работы: ...
Компания: TBC Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

AI Data Group Lead

... the strategic direction of AI data initiatives, ensuring alignment with business ... , and other stakeholders regarding AI data initiatives; Drive the creation of ... Experience: Proven experience leading a data science or AI-focused team, ...
Компания: Home Credit Bank Город:Казахстан, Алматы, улица Зеина Шашкина, 1/1
Зарплата: Размещено:
almaty.hh.kz

AI Data Group Lead

... the strategic direction of AI data initiatives, ensuring alignment with business ... , and other stakeholders regarding AI data initiatives; Drive the creation of ... Experience: Proven experience leading a data science or AI-focused team, ...
Компания: Home Credit Bank Город:Казахстан, Алматы, улица Зеина Шашкина, 1/1
Зарплата: Размещено:
almaty.hh.kz

Senior Data Software Engineer (Big Data)

... looking for an experienced Senior Data Software Engineer with a deep understanding of Apache Spark, Python Java Scala and proficiency with any cloud providers. In this role, you will develop and maintain data pipelines, working closely with cross- ...
Компания: Epam Kazakhstan (Эпам Казахстан),ТОО Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Data Engineer

Обязанности: Знание методологии проектирования хранилищ данных; знание методологии проектирования ETL процедур; знание интерфейсов интеграции ХД с источниками данных; знание СУБД PostgreSQL; опыт администрирования СУБД PostgreSQL, знание языка запросов SQL ...
Компания: МФО Арнур Кредит Город:Казахстан, Алматы
Зарплата: от 600000 до 800000 KZT Размещено:
almaty.hh.kz

Data Engineer

Kaspi.kz – это место, где необыкновенные люди собираются вместе, чтобы проявить свои лучшие качества, как в работе, так и в жизни, потому что Kaspi – это не просто финансовое учреждение, а большая семья, которая объединила под своим крылом более 10 тысяч ...
Компания: Kaspi.kz Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Data Engineer

Обязанности: • Проектирование структуры таблиц и оптимизация их производительности;• Разработка и настройка потоков данных для интеграции, обработки и загрузки данных;• Мониторинг и обеспечение стабильности работы потоков данных;• Создание скриптов для ...
Компания: Народный банк Казахстана Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Data Architect

... . Must-have: Experience as a Data Architect for 5+ years. Experience specifically as a Data Architect in the banking sector ... for banks. Strong understanding of Data Governance, Data Management, and data quality principles. Hands-on experience ...
Компания: Andersen Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Senior Antifraud Data & Process Analyst

... sectors. Proven experience in advanced data analysis, visualization, and reporting, using ... in Python or R for Data Analysis.Data Visualization Tools (e.g., Tableau, ...
Компания: inDrive Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Senior Antifraud Data & Process Analyst

... sectors. Proven experience in advanced data analysis, visualization, and reporting, using ... in Python or R for Data Analysis.Data Visualization Tools (e.g., Tableau, ...
Компания: inDrive Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Эксперт по продажам Big Data продуктов

... решений и продуктов Big Data Несет ответственность за продвижение услуг ... документооборот по проектам Big Data Анализирует рынок Big Data в телекоммуникационной сфере для оперативного ... решениям и продуктам Big Data На основе первичного анализа результатов ...
Компания: Kcell Город:Казахстан, Алматы, улица Тимирязева, 2Г
Зарплата: Размещено:
almaty.hh.kz

Data Engineering (Tech Orda Voucher) Trainee

... selection process. The Big Data Engineering program equips you with ... applications for real-time data transformation and processing. Automate data flows with Apache NiFi and ... , and Jenkins in modern data projects. Explore Elasticsearch – learn how ...
Компания: Epam Kazakhstan (Эпам Казахстан),ТОО Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Data Forecast Analyst

... for collecting, analyzing, and forecasting data related to all airport operations. ... attention to detail. Proficiency in data analysis tools (e.g., MS ... understanding of forecasting techniques and data modeling. Excellent written and verbal ...
Компания: Международный Аэропорт Алматы, АО Город:Казахстан, Алматы, улица Майлина, 2/1
Зарплата: Размещено:
almaty.hh.kz

BI Analyst of AI Data

... assistant performance. Develop and present data-driven insights related to AI ... quality; Utilize Oracle DWH, Hadoop data platform, and Power BI to gather, analyze, and visualize data efficiently; Create and maintain interactive ...
Компания: Home Credit Bank Город:Казахстан, Алматы, улица Зеина Шашкина, 1/1
Зарплата: Размещено:
almaty.hh.kz

BI Analyst of AI Data

... assistant performance. Develop and present data-driven insights related to AI ... quality; Utilize Oracle DWH, Hadoop data platform, and Power BI to gather, analyze, and visualize data efficiently; Create and maintain interactive ...
Компания: Home Credit Bank Город:Казахстан, Алматы, улица Зеина Шашкина, 1/1
Зарплата: Размещено:
almaty.hh.kz

Senior QA Engineer

... Test Data prepared by QA Engineer;- Verification of Test Data for its correspondence with Test ... Requirements;- Review of test documentation prepared by QA Engineer;- Participate in ...
Компания: Неткрэкер Текнолоджи Казахстан Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Middle Data Engineer

... для анализа; Разрабатывать и поддерживать data pipelines; Создавать и поддерживать конвейеры ... от 3 лет на позиции Data Engineer; Высшее образование в области компьютерных ...
Компания: Мобайл Телеком-Сервис (Объединенная Компания Tele2/Altel) Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Senior QA Engineer

... Test Data prepared by QA Engineer;- Verification of Test Data for its correspondence with Test ... Requirements;- Review of test documentation prepared by QA Engineer;- Participate in ...
Компания: Неткрэкер Текнолоджи Казахстан Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Senior Data Analyst / BI Developer

... -practices to ensure highest data quality and reliability standards. Proactively ... of experience as Business Data Analyst, Analytics Engineer or similar. Proven hands-on experience with delivering exceptional data products and analytics solutions. Proven ...
Компания: Autodoc Group (Автодок Казахстан) Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Директор по данным / CDO / Chief Data Officer

... сейчас мы ищем Chief Data Officer, который поможет вывести управление ... бизнес-аналитики (BI), Data Governance и работы с большими ... решений: AWS, GCP, Azure (Data Lake, Redshift, BigQuery и т. ... этапах. ⠀Хочешь строить data-культуру будущего и влиять на ...
Компания: Grand era Город:Казахстан, Алматы, улица Фонвизина, 17А
Зарплата: Размещено:
almaty.hh.kz

Network Engineer / Сетевой инженер

... position: Job Title: Network Engineer Division: Academic Affairs Department: Computer ... the integrity of data and documental support of the changes in data. Control and provision for timely and complete backup of data. Train users and promote security ...
Компания: KIMEP Город:Казахстан, Алматы, проспект Абая, 2
Зарплата: Размещено:
almaty.hh.kz

Junior Reservoir Engineer

As a Junior Reservoir Engineer, reporting to the Senior Reservoir Engineer in our Almaty office ... Analyze production, pressure, and injection data to assess field performance and ... tests and production logging data. Participate in field development planning ...
Компания: LUCENT PETROLEUM Город:Казахстан, Алматы, проспект Аль-Фараби, 77/7
Зарплата: Размещено:
almaty.hh.kz

Middle Data Analyst (NPS)

Мы ищем опытного Data Analyst Engineer, который поможет нам развивать аналитические ... Git Опыт работы в роли Data Analyst или Data Engineer (не менее 1 года). Будет ... ) Понимание ETL-процессов и построения data pipelines Системное и архитектурное мышление ...
Компания: Beeline, ТМ Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Sales Analyst

... the sales approach based on data analysis and market feedback. Training & ... to field sales representatives on data interpretation, reporting tools, and best ...
Компания: Ред Булл Казахстан Город:Казахстан, Алматы, улица Муратбаева, 180
Зарплата: Размещено:
almaty.hh.kz

Chief Data Officer

... проектами по развитию DWH, BI, data pipelines, автоматизации отчётности; Внедрять Data Governance Framework: политики, процессы, контроль ... ; Успешный опыт в проектах по Data Governance, DWH, BI или AI ...
Компания: ДиджиталБизФэктори Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Head of Data Engineering

... любить: Разрабатывать и реализовывать стратегии Data Engineering в соответствии с бизнес- ... и Airflow; Успешный опыт проектирования Data Warehouse Data Lake Lakehouse; Практический опыт с ...
Компания: Мобайл Телеком-Сервис (Объединенная Компания Tele2/Altel) Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

IT Support Engineer

... and risk analytics. Our Open Data & AI platform powers hundreds of organizations across 80+ countries.We’re looking for an L2 Support Engineer who can keep production smoothand ... : Support → Senior Support → SRE Engineer—your automation ideas will get ...
Компания: SL KG Город:Казахстан, Алматы
Зарплата: до 1500 USD Размещено:
almaty.hh.kz

Oracle Data Engineer

... моделей данных, поддержка DWH (Data Warehouse); Интеграция Oracle с другими ... Oracle Partitioning, Materialized Views, Data Pump, RMAN; Опыт работы с ... (Liquibase, Flyway); Знание принципов data governance, data quality. Будет плюсом: Понимание принципов ...
Компания: Freedom Holding Operations Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Senior Data Engineer (DWH)

... объемов данных для интеграции с Data Lake. Обновление стороннего ПО по ... предоставляемой информации. Поддержка решений Big Data и Data Lake. Сбор и анализ финансовых ... инженерии в DWH (Oracle) и Data Lake (Hadoop) Языки программирования: SQL ...
Компания: Kcell Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Team Lead DWH

... знания и опыт проектирования архитектуры Data Warehouse (DWH), слоев ХД, ЛМД ... в технические решения. Знание основ Data Governance и Data Quality. Наличие опыта в построении ...
Компания: Нурбанк Город:Казахстан, Алматы, проспект Абая, 10В
Зарплата: Размещено:
almaty.hh.kz

Data Software Engineering Trainee

... start a career in Data Software Engineering (prev. Big Data), then this program is what ... maintenance of large data-volume software systems Learn large-scale data handling technologies (Hadoop, Apache Spark, ... knowledge of DWH Data Lake and one of the ...
Компания: Epam Kazakhstan (Эпам Казахстан),ТОО Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Data steward

... взаимодействие с владельцем данных (Data owner) в части получения экспертизы ... провести консультацию; Описывать данные в Data Catalog и Business Glossary; Определение ... плюсом: Опыт работы с DWH Data Like; Опыт работы в Data Governance; Опыт работы в Fin ...
Компания: TBC Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Data Steward

... взаимодействие с владельцем данных (Data owner) в части получения экспертизы ... провести консультацию; Описывать данные в Data Catalog и Business Glossary; Определение ... плюсом: Опыт работы с DWH Data Like; Опыт работы в Data Governance; Опыт работы в Fin ...
Компания: TBC Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Oracle Procurement Engineer

... invites an Oracle Procurement Engineer to join its team for ... as an Oracle Procurement Engineer for 5+ years. Deep expertise ... APIs, interface tables, and data conversions. Competency in Unix Linux ... Join us Your personal data is protected in accordance with ...
Компания: Andersen Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Oracle HRMS Engineer

... an Oracle HRMS Engineer to join its team for ... as an Oracle HRMS Engineer for 5+ years. Proven expertise ... and interface tables for data conversions and integrations. Experience with ... sports activities. Your personal data is protected in accordance with ...
Компания: Andersen Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Oracle Finance Engineer

... invites an Oracle Finance Engineer to join its team for ... as an Oracle Finance Engineer for 5+ years. In-depth ... .2.9 Experience in data migration, interfaces, and integrations using ... . Join us Your personal data is protected in accordance with ...
Компания: Andersen Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz

Middle/Senior Front‑End Software Engineer (React / Next.js)

... complex dashboards that stream market data in real‑time. You’ll collaborate ...  CSS, CSS Modules, Storybook State & Data – React Query, Apollo Client Tooling – ... .js SSR ISR, routing, and data‑fetch patterns CSS mastery: Tailwind, ...
Компания: INVESTBANQ TECH LAB LIMITED Город:Казахстан, Алматы
Зарплата: Размещено:
almaty.hh.kz