بناء مجموعة بيانات NER عربية للأخبار (Label Studio + spaCy)

مقدمة حول سير العمل

وسم 5000 مقال، تصدير COCO/JSON، تدريب نموذج spaCy عربي محلي.

الهدف من سير العمل

إنتاج نموذج NER عربي خاص بقطاع محدّد (إنساني، صحي، اقتصادي).

الأدوات والتقنيات المستخدمة

تم استخدام الأدوات التالية: Label Studio و spaCy و Postgres و MinIO

تفاصيل تنفيذ سير العمل

  • مستوى الصعوبة: advanced
  • الوقت المتوقع للإعداد: أسبوع
  • محفز التشغيل (Trigger): Manual project + weekly model retrain

خطوات العمل (الآلية)

  1. Scrape news to JSONL
  2. Import to Label Studio
  3. Define labels: PERSON/ORG/LOC/EVENT
  4. Assign annotators
  5. Calculate inter-annotator agreement
  6. Export JSON-MIN
  7. Convert to spaCy format
  8. Train + evaluate
  9. Deploy as REST