أمس
مهندس بيانات أول - تحليلات السيرة الذاتية والتسويق
SSC HR Solutions · Cairo, Cairo Governorate, Egypt
Workableقدّم عبر موقع الشركة
Remote
Senior
نبذة عن الوظيفة
كبير مهندسي البيانات الفنية نحن نبحث عن مهندس بيانات تقنية أول لامتلاك بنية البيانات الفنية من البداية إلى النهاية، وتحديد كيفية استيعاب البيانات وتخزينها ومعالجتها وتقديمها وإدارتها عبر منصة البيانات. الدور مسؤول عن وضع المعايير الفنية والتوجيه المعماري الذي تعتمد عليه فرق هندسة البيانات، مع التركيز القوي على قابلية التوسع والموثوقية والأداء وجودة البيانات وقابلية الصيانة.
المسؤوليات الرئيسية
- امتلاك البنية التقنية الشاملة لمنصة البيانات.
- تحديد كيفية استيعاب البيانات وتخزينها ومعالجتها وتحويلها وتقديمها وإدارتها.
- تصميم وتطوير هياكل البيانات المجمعة والمتدفقة القابلة للتطوير.
- تحديد أبنية البحيرة باستخدام تنسيقات الجداول المفتوحة ومحركات الاستعلام المناسبة.
- تصميم خدمة البيانات في الوقت الحقيقي وبنيات OLAP لأحمال العمل التحليلية.
- وضع معايير لخطوط أنابيب البيانات، وتطور المخطط، وجودة البيانات، والنسب، والتحكم في الوصول.
- تحديد الأنماط المعمارية لسير عمل ETL/ELT ومعالجة البيانات.
- توجيه استخدام التقنيات مثل Spark وKafka وAirflow وSQL عبر النظام الأساسي للبيانات.
- تصميم منصات البيانات التي تدعم الحجم والأداء وكفاءة التكلفة والإيجارات المتعددة.
- تقييم المقايضات المعمارية وإبلاغ القرارات الفنية بوضوح.
- إنشاء أنماط معمارية قابلة لإعادة الاستخدام ومعايير هندسية عبر فرق البيانات.
- دعم بنية عمليات النشر المتعددة لنفس منصة البيانات لعملاء مختلفين.
- المساهمة في نماذج تشغيل منتجات البيانات وشبكة البيانات حيثما كان ذلك مناسباً.
- العمل بشكل وثيق مع مهندسي البيانات وأصحاب المصلحة التقنيين لضمان تنفيذ المعايير المعمارية باستمرار.
- تحديد الاختناقات المعمارية وإجراء تحسينات في الموثوقية وقابلية التوسع وكفاءة معالجة البيانات.
- تحديد الأساليب التقنية لإدارة المخطط وإدارة البيانات وإدارة دورة حياة البيانات.
- تصميم بنيات مناسبة لبيئات البنية التحتية ذاتية الإدارة والمحلية.
المتطلبات
المتطلبات
- خبرة مثبتة كمهندس بيانات، أو مهندس بيانات تقنية، أو دور مماثل في مجال هندسة البيانات.
- إظهار ملكية بنية منصة البيانات، بما يتجاوز تطوير خطوط الأنابيب والتسليم.
- خبرة عملية قوية في معالجة البيانات المجمعة والمتدفقة.
- معرفة قوية بهندسة البيانات، وETL/ELT، وتخزين البيانات، وتصميم البحيرة.
- التدريب العملي على الخبرة مع Apache Spark، وKafka، وAirflow، وSQL المتقدمة.
- خبرة في تصميم أبنية Lakehouse، وتنسيقات الجداول المفتوحة، وتكامل محركات الاستعلام.
- خبرة في تصميم أبنية خدمة البيانات في الوقت الحقيقي ومخازن بيانات OLAP.
- فهم قوي لنمذجة البيانات، وتصميم المخطط، وتطور المخطط.
- خبرة في تحديد معايير جودة البيانات، والنسب، والحكم، والتحكم في الوصول.
- خبرة في تصميم وتشغيل البنية التحتية للبيانات المُدارة ذاتياً أو المحلية.
- فهم قوي لمعالجة البيانات الموزعة ومنصات البيانات القابلة للتطوير.
- خبرة في تصميم بنيات البيانات متعددة المستأجرين وفهم العزلة المرتبطة بها ومقايضات الأداء.
- القدرة على تقييم قرارات الهندسة المعمارية بناءً على قابلية التوسع والأداء والموثوقية والتعقيد التشغيلي والتكلفة.
- خبرة في دعم عمليات نشر عملاء متعددة لنفس منصة البيانات أمر مرغوب فيه للغاية.
- الإلمام بنماذج تشغيل منتجات البيانات وشبكة البيانات.
- فهم قوي لإدارة دورة حياة البيانات وموثوقية النظام الأساسي.
- القدرة على تحديد المعايير الفنية والمبادئ التوجيهية المعمارية لفرق هندسة البيانات.
- مهارات اتصال قوية مع القدرة على شرح القرارات المعمارية المعقدة والمقايضات لأصحاب المصلحة التقنيين.
- تجربة التعاون الوثيق مع مهندسي البيانات ومهندسي المنصات والفرق الفنية الأخرى.
المسؤوليات
1Own the end-to-end technical architecture of the data platform.
2Define how data is ingested, stored, processed, transformed, served, and governed.
3Design and evolve scalable batch and streaming data architectures.
4Define lakehouse architectures using open table formats and appropriate query engines.
5Design real-time data serving and OLAP architectures for analytical workloads.
6Establish standards for data pipelines, schema evolution, data quality, lineage, and access control.
7Define architectural patterns for ETL/ELT workflows and data processing.
8Guide the use of technologies such as Spark, Kafka, Airflow, and SQL across the data platform.
المتطلبات
1Proven experience as a Data Architect, Technical Data Architect, or similar senior data architecture role.
2Demonstrated ownership of data platform architecture, beyond pipeline development and delivery.
3Strong hands-on experience with both batch and streaming data processing.
4Strong knowledge of data architecture, ETL/ELT, data warehousing, and lakehouse design.
5Hands-on experience with Apache Spark, Kafka, Airflow, and advanced SQL.
6Experience designing lakehouse architectures, open table formats, and query engine integrations.
7Experience designing real-time data serving architectures and OLAP data stores.
8Strong understanding of data modeling, schema design, and schema evolution.
9Experience defining standards for data quality, lineage, governance, and access control.
10Experience designing and operating self-managed or on-premises data infrastructure.
11Strong understanding of distributed data processing and scalable data platforms.
12Experience designing multi-tenant data architectures and understanding the associated isolation and performance trade-offs.
13Ability to evaluate architecture decisions based on scalability, performance, reliability, operational complexity, and cost.
14Experience supporting multiple client deployments of the same data platform is highly desirable.
المهارات والوسوم
Information TechnologyEGSQLData AnalysisMarketingCompliance
