Azure Data Engineer
... Blob Storage. Knowledge of Azure Data Factory (ADF), Azure Databricks, Azure Synapse Analytics (formerly SQL Data Warehouse), and other Azure data tools. Data Modeling and Database Design: Experience ...
Ведущий Data инженер
Қала :
Казахстан, Алматы
Компания :
TECHNODOM Operator (Технодом Оператор)
Жалақы :
Табылды :
6 days ago
Сипаттама
Обязанности:
- Автоматизация, оптимизация и поддерживать существующие процессов;
- Участвовать в разработке архитектуры и стратегии развития Big Data;
- Сбор, подготовка и агрегация данных из различных источников в Data lake, строить витрины данных;
- Строить потоковую аналитику;
- Разработка и поддержка витрин данных в интересах аналитиков/datascience;
- Организация мониторинга качества данных, выявление и устранение ошибок и несоответствий;
- Знание принципов и концепций хранилищ данных, включая методологии проектирования, моделирование данных и оптимизацию запросов;
- Разработка, поддержка и оптимизация ETL/ELT процессов на AWS;
- Реализация обмена данными между системами ( От AWS и дальше);
- Поддержание документации по процессам ETL/ELT, сущностям и объектам DWH в актуальном состоянии.
Требования:
- Опыт работы с базами данных MS SQL, mysql, PostgreSQL. Работа с Oracle, mongoDB, sap hana будет преимуществом;
- Опыт работы не менее 2-3 лет в области данных и интеграции, с акцентом на работу с хранилищами данных;
- Понимание ETL и ELT концепции;
- Знание концепции работы с CDC (Change data capture);
- Опыт работы со стеком Hadoop будет преимуществом;
- Опыт работы в облачных сервисах будет преимуществом (Amazon web services, MS Azure, Google big query);
- Опыт работы с потоковой аналитикой данных;
- Опыт в оптимизация больших запросов;
- Хорошее знание реляционных и не реляционных баз данных;
- Передовой отечественный и зарубежный опыт в области хранения, извлечения и администрирования данных;
- Умение читать чужой код;
- Стек: Python, PySpark, Scala, SQL, PLSql, Git, Jira
Мы предлагаем:
- Работу в успешной компании;
- Современный офис в центре города, с комнатами отдыха и капсулами сна;
- Удобное рабочее место, с мощными машинами и новейшим ПО;
- Возможность обучения и профессионального роста;
- Оформление согласно ТК РК;
- Корпоративные скидки в наших магазинах;
- Пятидневную рабочую неделю.
Ұқсас бос орындар
Senior Azure Data Engineer
... Apache Pig Azure Stream Analytics Data visualization: Power BI Tableau QlikView Data management: Azure Data Lake Storage Gen2 Azure Data Factory (ADF) Azure Synapse Analytics (formerly Azure SQL Data Warehouse) Cloud computing: Azure Virtual ...
Data Manager to Data Analytics team
... in a dedicated Data & Analytics department. At the moment, ... identifying key data problems challenges development Data strategy, based on Data Governance Framework implementing Data Governance Data Management supporting of the data projects acting as a PMO ...
Market insight manager
... the stakeholders to understand the data-analysis steps, enabling them to ... - this includes local movements in Data Warehousing, Visualization, and Infrastructure platforms ...
Research Fellow in Data Analytic (Bishkek, Kyrgyz Republic)
... to the establishment of the Data Hub at the Graduate School ... key terms and concepts of Data Science and Machine Learning. Develop ... years of experience working in data analytics or related area and ...
Senior data инженер
Мы ищем опытного дата-инженера, который сможет выстроить инфраструктуру БД, ...
Data engineer
... the quality and reliability of data that drives end-to-end ... Qualifications: - In-depth knowledge of Data Engineering methodologies - Ability to work ... level in the field of data engineering - Ability to find innovative ...
Database engineer
... to ensure optimal database performance, data integrity, and scalability. Responsibilities: Design ... recovery strategies to ensure data availability. Conduct database security assessments ... field. Proficiency in SQL and data modeling. Proven experience as a ...
Data Engineer
... API, GraphQL, DBT, etc. ) and data pipeline orchestration (e.g., Airflow, ... and transforming large volumes of data, data quality and data validation Experience in SQL (SQL ...
Senior Data Scientist / Machine Learning Engineer with AWS
... development processes and pipelines, from data collection to production deployment, including ... technologies and industry trends in data science and AI Support and ... 4+ years of experience in data science, machine learning and MLOps ...
Data Office Manager
... architecture of SFA solution and data warehouse Leads internal and external ... , Integration services. Power BI, ETL Data strategy development and implementation experience Big data and machine learning technologies is ...
DX/Shopper Insights Manager
... WCCE for Organized Trade with Data, Shopper Category Customer opportunities & insights ... methodologies and techniques (retail audit data, qual&quant research methodologies etc); ... the use of my personal data and resume by the companys ...
Business Development Manager BI & Data (remote)
... др.) проектов и решений BI & Data (PowerBI, Azure Data Platform, Azure AI Services, DWH, ... от 3-х лет (BI, Data, DWH, Master Data Management, DataLake, AI, ML, OpenSource, ... и минусов реализации проектов BI & Data в облачной и локальной инфраструктуре; ...
Sales data analytics
... . - Arrange and sort out useful data for business turnover analysis. - Prepare ... documenting business requirements. Analysing commercial data such as budgets, sales results ... of MS Office and Analyzing Data (Excell, Powre BI, SAP) Education ...
Sales data analytics
... . - Arrange and sort out useful data for business turnover analysis. - Prepare ... documenting business requirements. Analysing commercial data such as budgets, sales results ... of MS Office and Analyzing Data (Excell, Powre BI, SAP) Education ...
Data Quality Analytic
... процессов; Опыт в проектах внедрения Data Quality Знание принципов построения DWH ... работы с инструментами: Informatica Enterprise Data Catalog, Informatica Axon Data Governance, Informatica Data Quality Умение презентовать и выступать ...
Data analyst to Economic Security team (anti-fraud)
... are currently seeking for a Data analyst, anti-fraud to join ... with all teams in the Data Department to optimize data flows, control data quality and integrity, and create data marts for the product. Identify ...
Data инженер
... Опыт построения и оптимизации big data pipelines и архитектур данных Знание ...
Эксперт по продажам Big Data продуктов
... описанием решений и продуктов Big Data. 3. Ответственность за продвижение услуг ... 10. Документооборот по проектам Big Data Требования: Образование: ВысшееСпециализация: Техническое, Экономическое, ...