كبير مهندسي تجريف بيانات بايثون (مستقل)

تبحث Mindrift عن متخصصين ذوي مهارات عالية في Vibecode للانضمام إلى مشروع Tendem (https://tendem.ai/) وقيادة سير عمل تجريف البيانات المتخصصة لحالات الاستخدام في العالم الحقيقي. تبحث Mindrift عن كبار مهندسي استخراج بيانات Python من ذوي المهارات العالية للانضمام إلى مشروع Tendem وقيادة سير عمل تجريف البيانات المتخصصة لتطبيقات العالم الحقيقي. في هذا الدور، ستطبق خبرتك في استخراج البيانات من الويب واستخراج البيانات ومعالجتها لتقديم نتائج دقيقة وموثوقة وعالية الجودة. تعد هذه الفرصة عن بعد بدوام جزئي مثالية للمحترفين التقنيين الذين يتمتعون بخبرة عملية في استخراج الويب واستخراج البيانات ومعالجتها.

ماذا نفعل تعمل منصة Mindrift على ربط المتخصصين بمشاريع التكنولوجيا المبتكرة. مهمتنا هي المساعدة في تطوير تقنيات الذكاء الاصطناعي عالية الجودة من خلال الجمع بين الخبرة الواقعية من المتخصصين في جميع أنحاء العالم وجهود تطوير الذكاء الاصطناعي المتقدمة.

حول الدور هذا دور مستقل لمشروع Tendem. باعتبارك أحد كبار مهندسي استخراج بيانات Python، ستتعامل مع مهام تجريف البيانات التي تتطلب دقة فنية لاستخراج الويب ومعالجته، باستخدام أدوات مثل Apify وOpenRouter والتقنيات الأخرى، جنبًا إلى جنب مع خبرتك وأساليبك الفنية.

المسؤوليات الرئيسية • امتلاك سير عمل شامل لاستخراج البيانات عبر مواقع الويب المعقدة، مما يضمن التغطية الكاملة والدقة والتسليم الموثوق لمجموعات البيانات المنظمة. • الاستفادة من الأدوات المتاحة وسير العمل المخصص لتسريع عملية جمع البيانات والتحقق من صحتها وتنفيذ المهام مع تلبية المتطلبات المحددة. • ضمان الاستخراج الموثوق به من مصادر الويب الديناميكية والتفاعلية، وتكييف الأساليب حسب الحاجة للتعامل مع المحتوى المقدم بواسطة JavaScript وتغيير سلوك الموقع. • فرض معايير جودة البيانات من خلال عمليات التحقق من الصحة، وضوابط الاتساق عبر المصادر، والالتزام بمواصفات التنسيق، والتحقق المنهجي قبل التسليم. • توسيع نطاق عمليات التجميع لمجموعات البيانات الكبيرة باستخدام عمليات التجميع أو الموازاة الفعالة، ومراقبة حالات الفشل، والحفاظ على الاستقرار في مواجهة التغييرات الطفيفة في بنية الموقع.

المؤهلات التعليمية • ما لا يقل عن 5 سنوات من الخبرة ذات الصلة في هندسة البيانات، أو تجريف الويب، أو الأتمتة، أو تطوير البرامج (مطلوب). • درجة البكالوريوس أو الماجستير في الهندسة أو الرياضيات التطبيقية أو علوم الكمبيوتر أو المجالات التقنية ذات الصلة تعتبر ميزة إضافية.

الخبرة الأكاديمية و/أو المهنية يجب أن يتمتع المرشحون بأساس تقني قوي وخبرة عملية في البرمجة النصية والأتمتة وسير عمل استخراج البيانات. نحن نبحث عن متخصصين يمكنهم حل المشكلات غير التافهة، والعمل بثقة باستخدام أدوات وتقنيات التطوير الحديثة، وجمع البيانات وتنظيمها والتحقق من صحتها بشكل منهجي من مصادر متنوعة. يعد النهج المنهجي الموجه نحو التفاصيل والقدرة على العمل بشكل مستقل أمرًا ضروريًا.

المهارات الفنية (الأساسية) • خبرة قوية في استخراج بيانات الويب بلغة Python (BeautifulSoup أو Selenium أو ما شابه ذلك)، بما في ذلك المحتوى الديناميكي (JS وAJAX والتمرير اللانهائي) وواجهات برمجة التطبيقات عبر الوكلاء • قدرة مثبتة على استخراج البيانات من الهياكل المعقدة (التسلسلات الهرمية، الصفحات المؤرشفة، HTML غير المتسق) • خلفية قوية في تنظيف البيانات، وتطبيعها، والتحقق من صحتها، وتقديم مجموعات البيانات المنظمة (CSV، JSON، Google Sheets)

متطلبات إضافية • خبرة مثبتة في التعامل مع آليات مكافحة الروبوتات وهياكل الموقع الديناميكية على نطاق واسع • تجربة مع البنية التحتية السحابية (AWS أو ما يعادلها) والحاويات (Docker) كجزء من سير العمل الحقيقي • خبرة عملية مع أطر عمل LLM (LangChain، أو OpenRouter، أو ما شابه ذلك) المطبقة على مهام التشغيل الآلي • الاهتمام القوي بالتفاصيل والالتزام بدقة البيانات • أخلاقيات العمل الموجهة ذاتياً مع القدرة على استكشاف الأخطاء وإصلاحها بشكل مستقل • يعتبر الارتباط بـ GitHub ميزة إضافية • إجادة اللغة الإنجليزية: المستوى فوق المتوسط (B2) أو أعلى (مطلوب)

توقعات وقت المشروع بالنسبة لهذا المشروع، من المقدر أن تتطلب المهام حوالي 10 إلى 20 ساعة أسبوعيًا خلال المراحل النشطة، بناءً على متطلبات المشروع. وهذا تقدير، وليس عبء عمل مضمونًا، وينطبق فقط أثناء نشاط المشروع.

التعويض في هذا المشروع، يمكن للمساهمين كسب ما يصل إلى 25 دولارًا أمريكيًا في الساعة، اعتمادًا على مستوى مساهمتهم ووتيرة مساهمتهم. يختلف التعويض عبر المشاريع اعتمادًا على النطاق والتعقيد والخبرة المطلوبة. يرجى ملاحظة أن المشاريع الأخرى على المنصة قد تقدم مستويات ربح مختلفة بناءً على متطلباتها.