نظرة عامة
نبحث عن مهندس بيانات أول ماهر يتمتع بخبرة عميقة في ClickHouse ومعالجة البيانات المتدفقة، بالإضافة إلى شغف ببناء حلول تحليلات قابلة للتطوير في الوقت الفعلي. في هذا الدور، ستقوم بتصميم وتطوير وتحسين خطوط أنابيب البيانات والبنية التحتية للتحليلات لدينا، مما يُمكّن فرقنا من الاستفادة من الرؤى في الوقت الفعلي التي تُحسّن تجربة العملاء وتُعزز نمو الأعمال.
المسؤوليات الرئيسية
- تصميم وتنفيذ وصيانة وتوثيق خطوط أنابيب بيانات قابلة للتطوير للغاية لمعالجة البيانات في الوقت الفعلي ومعالجة الدُفعات.
- بناء وتحسين أنظمة البيانات لدعم حالات استخدام التحليلات والإبلاغ الدقيقة ومنخفضة زمن الوصول.
- تطوير وصيانة حلول لمعالجة البيانات المتدفقة والخادمات بدون خادم.
- التعاون مع فرق العمل متعددة الوظائف لتنفيذ ودعم سير عمل التحليلات الشاملة.
- ضمان جودة البيانات وموثوقيتها وأدائها عبر النظام الأساسي.
- رصد البنية التحتية للبيانات واستكشاف الأخطاء وإصلاحها وتحسينها للحفاظ على التوفر العالي.
- توجيه المهندسين المبتدئين والمساهمة في التحسين المستمر للممارسات الهندسية.
المتطلبات
- 5+ سنوات من الخبرة في هندسة البيانات أو المجالات ذات الصلة.
- خبرة قوية في ClickHouse: خبرة في تصميم المخططات والمهام، وتحسين استيعاب البيانات بالإضافة إلى الاستعلامات، وإدارة المجموعات، وما إلى ذلك.
- خبرة مثبتة في معالجة البيانات في الوقت الفعلي وإثرائها باستخدام أدوات مثل Apache Kafka و Apache Flink و Apache Spark Streaming وتقنيات الخادمات بدون خادم مثل AWS Lambda و GCP Functions، وما إلى ذلك.
- فهم عميق لتصميم وهندسة الأنظمة الموزعة، مع التركيز على قابلية التطوير والمرونة، خاصة فيما يتعلق بمعالجة البيانات.
- إتقان لغات البرمجة مثل Python أو Java.
- خبرة عملية مع منصات سحابية (مثل AWS أو GCP أو Azure).
- إلمام بأدوات الحاويات والتنسيق مثل Docker و Kubernetes.
- مهارات قوية في حل المشكلات والقدرة على العمل في بيئة سريعة الخطى.
- مهارات ممتازة في التواصل والتعاون، مع القدرة المثبتة على العمل بفعالية كجزء من فريق.
المؤهلات المفضلة
- ستكون الخبرة في صناعة التجارة الإلكترونية أو بيئات مماثلة عالية الكثافة للبيانات إضافة كبيرة.
- معرفة أدوات ETL/ELT مثل Airflow أو dbt أو ما يعادلها.
- إلمام بأدوات المراقبة والملاحظة لأنظمة البيانات (مثل Prometheus و Grafana).
