ما هو تصنيف بيانات الذكاء الاصطناعي؟

إذا كنتَ تُنشئ أو تُقيّم أنظمة تعلّم آلي، فستواجه نفس العقبة عاجلاً أم آجلاً: البيانات المُصنّفة. لا تُدرك النماذج ما هو مُحدّد تلقائياً. يجب على الأشخاص والسياسات، وأحياناً البرامج، تعليمها. إذًا، ما هو تصنيف بيانات الذكاء الاصطناعي؟ باختصار، هو إضافة معنى إلى البيانات الخام حتى تتمكن الخوارزميات من التعلم منها... 😊

🔗 ما هي أخلاقيات الذكاء الاصطناعي
نظرة عامة على المبادئ الأخلاقية التي توجه التطوير والنشر المسؤول للذكاء الاصطناعي.

🔗 ما هو MCP في الذكاء الاصطناعي
يوضح بروتوكول التحكم في النموذج ودوره في إدارة سلوك الذكاء الاصطناعي.

🔗 ما هو الذكاء الاصطناعي الحافة
يتناول كيفية قيام الذكاء الاصطناعي بمعالجة البيانات مباشرة على الأجهزة الموجودة على الحافة.

🔗 ما هو الذكاء الاصطناعي الوكيل
يقدم وكلاء الذكاء الاصطناعي المستقلين القادرين على التخطيط والتفكير والعمل المستقل.

ما هو تصنيف بيانات الذكاء الاصطناعي حقًا؟ 🎯

تصنيف بيانات الذكاء الاصطناعي هو عملية ربط علامات أو نطاقات أو مربعات أو فئات أو تصنيفات مفهومة للبشر بمدخلات خام، مثل النصوص والصور والمقاطع الصوتية والفيديو والسلاسل الزمنية، حتى تتمكن النماذج من اكتشاف الأنماط والتنبؤ. تخيل وضع مربعات حول السيارات، أو وضع علامات الكيان على الأشخاص والأماكن في النصوص، أو التصويت على التفضيلات التي تبدو إجابات روبوتات الدردشة أكثر فائدة لها. بدون هذه التصنيفات، لن ينطلق التعلم المُشرف التقليدي.

ستسمع أيضًا تسميات تُسمى " البيانات الأساسية" أو "البيانات الذهبية" : إجابات متفق عليها بموجب تعليمات واضحة، تُستخدم لتدريب النموذج والتحقق من صحته وتدقيق سلوكه. حتى في عصر النماذج الأساسية والبيانات التركيبية، لا تزال المجموعات المُسمّاة مهمة للتقييم والضبط الدقيق وتنسيق فرق العمل الأمنية وحالات التطرف طويلة المدى - أي كيفية تصرف نموذجك مع الأشياء الغريبة التي يقوم بها مستخدموك بالفعل. لا توجد وجبة مجانية، فقط أدوات مطبخ أفضل.

ما الذي يجعل تصنيف بيانات الذكاء الاصطناعي جيدًا ✅

ببساطة: التصنيف الجيد مملٌّ في أحسن الأحوال. يبدو متوقعًا، وقابلًا للتكرار، ومُوثّقًا بشكلٍ مُفرط. هكذا يبدو الأمر:

علم الوجود الضيق : مجموعة محددة من الفئات والسمات والعلاقات التي تهمك.
تعليمات الكريستال : أمثلة عملية، وأمثلة مضادة، وحالات خاصة، وقواعد كسر التعادل.
حلقات المراجعة : زوج ثانٍ من العيون على شريحة من المهام.
مقاييس الاتفاق : اتفاق بين المعلقين (على سبيل المثال، κ لكوهين، α لكريبندورف) حتى تتمكن من قياس الاتساق، وليس المشاعر. α مفيد بشكل خاص عندما تكون العلامات مفقودة أو عندما يغطي العديد من المعلقين عناصر مختلفة [1].
البستنة الحدية : جمع الحالات الغريبة أو العدائية أو النادرة بشكل منتظم.
التحقق من التحيز : تدقيق مصادر البيانات، والديموغرافيا، والمناطق، واللهجات، وظروف الإضاءة، والمزيد.
المنشأ والخصوصية : تتبع مصدر البيانات، وحقوق استخدامها، وكيفية التعامل مع المعلومات الشخصية القابلة للتعريف (ما الذي يعد معلومات شخصية قابلة للتعريف، وكيف تصنفها، والضمانات) [5].
التغذية الراجعة في التدريب : لا تعيش العلامات في مقبرة جداول البيانات - بل تتغذى مرة أخرى على التعلم النشط والضبط الدقيق والتقييمات.

اعتراف بسيط: ستعيد كتابة إرشاداتك عدة مرات. هذا أمر طبيعي. كما هو الحال مع تتبيل الحساء، فإن تعديلًا بسيطًا يُحدث فرقًا كبيرًا.

حكاية ميدانية سريعة: أضاف أحد الفرق خيارًا واحدًا لـ "لا أستطيع اتخاذ قرار - أحتاج إلى سياسة" إلى واجهة المستخدم الخاصة به. ارتفع معدل الموافقة لأن المعلقين توقفوا عن فرض التخمينات، وأصبح سجل القرارات أكثر دقة بين عشية وضحاها. انتصارات مملة.

جدول المقارنة: أدوات تصنيف بيانات الذكاء الاصطناعي 🔧

ليس هذا كل ما في الأمر، ونعم، الصياغة مُركّبة بعض الشيء عمدًا. تختلف الأسعار، لذا تأكد دائمًا من مواقع البائعين قبل وضع الميزانية.

أداة	الأفضل لـ	نمط السعر (إرشادي)	لماذا ينجح؟
صندوق الملصقات	الشركات، مزيج السيرة الذاتية والبرمجة اللغوية العصبية	طبقة مجانية تعتمد على الاستخدام	تدفقات عمل ضمان الجودة، والوجودات، والمقاييس لطيفة؛ تتعامل مع الحجم بشكل جيد.
الحقيقة الأساسية حول AWS SageMaker	المنظمات التي تركز على AWS، وخطوط أنابيب HITL	لكل مهمة + استخدام AWS	مترابط مع خدمات AWS، وخيارات المشاركة البشرية، وبنية تحتية قوية.
مقياس الذكاء الاصطناعي	المهام المعقدة والقوى العاملة المُدارة	اقتباس مخصص، متعدد المستويات	خدمات عالية الجودة بالإضافة إلى الأدوات؛ عمليات قوية للحالات الصعبة.
سوبر أنوتيت	فرق العمل والشركات الناشئة ذات الرؤية القوية	المستويات، تجربة مجانية	واجهة مستخدم مصقولة، وتعاون، وأدوات مساعدة نموذجية مفيدة.
معجزة	المطورون الذين يريدون التحكم المحلي	رخصة مدى الحياة، لكل مقعد	قابلة للبرمجة، حلقات سريعة، وصفات سريعة يتم تشغيلها محليًا؛ رائعة لمعالجة اللغة الطبيعية.
دوكانو	مشاريع معالجة اللغة الطبيعية مفتوحة المصدر	مجاني ومفتوح المصدر	مدفوعًا بالمجتمع، وسهل النشر، وجيد لأعمال التصنيف والتسلسل

التحقق من واقع نماذج التسعير : يمزج البائعون وحدات الاستهلاك، والرسوم لكل مهمة، والمستويات، وعروض الأسعار المخصصة للمؤسسات، والتراخيص لمرة واحدة، والبرمجيات مفتوحة المصدر. تتغير السياسات؛ تأكد من التفاصيل مباشرةً مع مستندات البائع قبل أن تُدخل المشتريات الأرقام في جدول بيانات.

أنواع الملصقات الشائعة، مع صور ذهنية سريعة 🧠

تصنيف الصورة : علامة واحدة أو علامات متعددة للصورة بأكملها.
اكتشاف الكائنات : المربعات المحددة أو المربعات الدائرية حول الكائنات.
التجزئة : أقنعة على مستوى البكسل - مثيل أو دلالي؛ مرضية بشكل غريب عندما تكون نظيفة.
النقاط الرئيسية والوضعيات : المعالم مثل المفاصل أو النقاط في الوجه.
معالجة اللغة الطبيعية : تسميات المستندات، وامتدادات الكيانات المسماة، والعلاقات، وروابط المرجع المشترك، والسمات.
الصوت والكلام : النسخ، وتسجيل المتحدث، وعلامات النية، والأحداث الصوتية.
الفيديو : مربعات أو مسارات حسب الإطار، وأحداث زمنية، وعلامات إجراء.
السلاسل الزمنية والمستشعرات : الأحداث النافذة، الشذوذ، أنظمة الاتجاهات.
عمليات سير العمل التوليدية : تصنيف التفضيلات، وإشارات التحذير من المخاطر الأمنية، وتسجيل النتائج من خلال الصدق، والتقييم القائم على معايير التقييم.
البحث وRAG : مدى صلة استعلام المستند، وإمكانية الإجابة، وأخطاء الاسترجاع.

إذا كانت الصورة عبارة عن بيتزا، فإن التجزئة هي تقطيع كل شريحة بشكل مثالي، في حين أن الاكتشاف هو الإشارة والقول بأن هناك شريحة... في مكان ما هناك.

تشريح سير العمل: من البيانات المختصرة إلى البيانات الذهبية 🧩

عادةً ما يتبع خط أنابيب وضع العلامات القوي الشكل التالي:

تعريف الأنطولوجيا : الفئات، والسمات، والعلاقات، والغموض المسموح به.
مسودة المبادئ التوجيهية : الأمثلة، والحالات الحدية، والأمثلة المضادة الصعبة.
قم بتسمية مجموعة تجريبية : احصل على بضع مئات من الأمثلة الموضحة للعثور على الثغرات.
اتفاق القياس : حساب κ/α؛ مراجعة التعليمات حتى يتقارب المعلقون [1].
تصميم ضمان الجودة : التصويت بالإجماع، والتحكيم، والمراجعة الهرمية، والفحوصات العشوائية.
عمليات الإنتاج : مراقبة الإنتاج والجودة والانحراف.
إغلاق الحلقة : إعادة التدريب، وإعادة أخذ العينات، وتحديث معايير التقييم مع تطور النموذج والمنتج.

نصيحة ستشكر نفسك عليها لاحقًا: احتفظ بسجل قرارات . دوّن كل قاعدة توضيحية تضيفها وسببها . في المستقبل، ستنسى السياق. في المستقبل، ستكون غاضبًا منها.

الإنسان في الحلقة، والإشراف الضعيف، وعقلية "مزيد من العلامات، وعدد أقل من النقرات" 🧑💻🤝

التفاعل البشري (HITL) يعني تعاون الأفراد مع النماذج في التدريب والتقييم والعمليات المباشرة، سواءً لتأكيد أو تصحيح أو الامتناع عن اقتراحات النماذج. يُستخدم هذا لتسريع وتيرة العمل مع إبقاء الأفراد مسؤولين عن الجودة والسلامة. يُعدّ HITL ممارسةً أساسيةً في إدارة مخاطر الذكاء الاصطناعي الموثوقة (الإشراف البشري، والتوثيق، والمراقبة) [2].

الإشراف الضعيف حيلة مختلفة ولكنها مُكمِّلة: القواعد البرمجية، والأساليب التجريبية، والإشراف عن بُعد، أو غيرها من المصادر المُشوِّشة تُولِّد تسميات مؤقتة على نطاق واسع، ثم تُزيل الضوضاء منها. وقد روَّجت برمجة البيانات لدمج العديد من مصادر التسميات المُشوِّشة (المعروفة أيضًا باسم دوال التسميات ) ودراسة دقتها لإنتاج مجموعة تدريب عالية الجودة [3].

عمليًا، تمزج فرق العمل عالية السرعة هذه العناصر الثلاثة: التصنيفات اليدوية للمجموعات الذهبية، والإشراف الضعيف للتمهيد، وHITL لتسريع العمل اليومي. هذا ليس غشًا، بل مهارة.

التعلم النشط: اختر أفضل شيء لتسميته 🎯📈

يُغيّر التعلّم النشط مجرى الأمور. فبدلاً من أخذ عينات عشوائية من البيانات لتصنيفها، يُتيح للنموذج طلب الأمثلة الأكثر إفادة: عدم يقين مرتفع، اختلافات كبيرة، تمثيلات متنوعة، أو نقاط قريبة من حدود القرار. مع أخذ عينات جيد، يُقلّل ذلك من هدر التصنيف ويُركّز على التأثير. تُشير الدراسات الاستقصائية الحديثة التي تُغطّي التعلّم النشط العميق إلى أداء قوي مع عدد أقل من التصنيفات عندما تكون حلقة أوراكل مُصمّمة جيدًا [4].

وصفة أساسية يمكنك البدء بها، بدون أي دراما:

تدرب على مجموعة صغيرة من البذور.
سجل نقاط المجموعة غير المصنفة.
حدد أعلى K حسب عدم اليقين أو الخلاف في النموذج.
قم بتسمية. أعد التدريب. كرر ذلك على دفعات صغيرة.
راقب منحنيات التحقق ومقاييس الاتفاق حتى لا تطارد الضوضاء.

ستعرف أن الأمر يعمل عندما يتحسن نموذجك دون مضاعفة فاتورة وضع العلامات الشهرية الخاصة بك.

مراقبة الجودة التي تعمل بالفعل 🧪

ليس عليك أن تغلي المحيط. احرص على إجراء هذه الفحوصات:

الأسئلة الذهبية : حقن العناصر المعروفة وتتبع دقة كل ملصق.
الإجماع مع التحكيم : علامتان مستقلتان بالإضافة إلى مراجع للاختلافات.
اتفاقية بين المعلقين : استخدم α عندما يكون لديك معلقون متعددون أو تسميات غير كاملة، وκ للأزواج؛ لا تركز على عتبة واحدة - فالسياق مهم [1].
مراجعة الإرشادات : الأخطاء المتكررة تعني عادةً تعليمات غامضة، وليس معلقين سيئين.
التحقق من الانجراف : مقارنة توزيعات العلامات عبر الزمن والجغرافيا وقنوات الإدخال.

إذا اخترت مقياسًا واحدًا فقط، فاختر التوافق. إنه مؤشر سريع على صحة البيانات. استعارة معيبة بعض الشيء: إذا لم تكن مُصنِّفاتك مُتوافقة، فإن نموذجك يعمل بعجلات مُتذبذبة.

نماذج القوى العاملة: داخلية، أو الاستعانة بمصادر خارجية، أو جماعية، أو مختلطة 👥

داخليًا : الأفضل للبيانات الحساسة والمجالات الدقيقة والتعلم السريع بين الوظائف.
البائعون المتخصصون : إنتاجية متسقة، وضمان جودة مدرب، وتغطية عبر المناطق الزمنية.
التمويل الجماعي : رخيص لكل مهمة، ولكنك ستحتاج إلى ذهب قوي والتحكم في البريد العشوائي.
هجين : الاحتفاظ بفريق الخبراء الأساسي والاعتماد على القدرات الخارجية.

مهما كان اختيارك، استثمر في عمليات الانطلاق، والتدريب على الإرشادات، وجولات المعايرة، والتقييمات الدورية. الملصقات الرخيصة التي تُجبر على إعادة التسمية ثلاث مرات ليست رخيصة.

التكلفة والوقت والعائد على الاستثمار: فحص سريع للواقع 💸⏱️

تُقسّم التكاليف إلى القوى العاملة، والمنصة، وضمان الجودة. للتخطيط التقريبي، رتّب خطتك كالتالي:

هدف الإنتاج : العناصر يوميًا لكل مُلصق × مُلصق.
تكاليف ضمان الجودة : % تم تصنيفها أو مراجعتها مرتين.
معدل إعادة العمل : الميزانية المخصصة لإعادة التوضيح بعد تحديثات المبادئ التوجيهية.
رفع الأتمتة : يمكن أن تؤدي العلامات المسبقة المدعومة بالنموذج أو القواعد البرمجية إلى تقليل الجهد اليدوي بمقدار كبير (ليس سحريًا، ولكنه مفيد).

إذا طلب قسم المشتريات رقمًا، فقدم لهم نموذجًا - وليس تخمينًا - وحافظ على تحديثه مع استقرار إرشاداتك.

المخاطر التي ستواجهها مرة واحدة على الأقل، وكيفية تجنبها 🪤

زحف التعليمات : تتضخم الإرشادات في رواية قصيرة. حلّ المشكلة بأشجار القرار + أمثلة بسيطة.
تضخم الفئات : كثرة الفئات ذات الحدود غير الواضحة. دمج أو تحديد فئة "أخرى" صارمة مع السياسة.
الإفراط في فهرسة السرعة : التسميات المتسرعة تُفسد بيانات التدريب بهدوء. أدخل الذهب؛ حدّ أقصى لأسوأ المنحدرات.
قفل الأدوات : تنسيقات التصدير مهمة. اتخذ قرارًا مبكرًا بشأن مخططات JSONL ومعرفات العناصر غير القابلة للتنفيذ.
تجاهل التقييم : إذا لم تقم بتسمية مجموعة التقييم أولاً، فلن تتأكد أبدًا مما تم تحسينه.

لنكن صريحين، ستتراجع بين الحين والآخر. لا بأس. الحيلة هي تدوين التراجع ليكون عمديًا في المرة القادمة.

الأسئلة الشائعة الصغيرة: إجابات سريعة وصادقة 🙋♀️

س: هل يختلفان عن التسمية؟
ج: عمليًا، يُستخدم المصطلحان بالتبادل. التسمية هي عملية وضع العلامات أو الوسم. غالبًا ما ينطوي التسمية على عقلية واقعية مع ضمان الجودة وإرشادات. هراء.

س: هل يُمكنني الاستغناء عن وضع العلامات بفضل البيانات المُصنّعة أو الإشراف الذاتي؟
ج: يُمكنك تقليلها ، لا الاستغناء عنها. ما زلتَ بحاجة إلى بيانات مُصنّفة للتقييم، ووضع الحواجز، والضبط الدقيق، والسلوكيات الخاصة بالمنتج. قد يُحسّن الإشراف الضعيف من أدائك عندما لا يكفي وضع العلامات يدويًا وحده [3].

س: هل ما زلتُ بحاجة إلى مقاييس الجودة إذا كان مُراجعو بحثي خبراء؟
ج: نعم. يختلف الخبراء أيضًا. استخدم مقاييس التوافق (κ/α) لتحديد التعريفات الغامضة والفئات الغامضة، ثم حسّن من فهمك للقواعد [1].

س: هل يقتصر دور الإنسان على التسويق فقط؟
ج: لا. إنه نمط عملي يوجه فيه الإنسان سلوك النموذج ويصححه ويقيّمه. يُوصى به ضمن ممارسات إدارة مخاطر الذكاء الاصطناعي الموثوقة [2].

س: كيف أحدد أولوية ما أضع عليه علامة؟
ج: ابدأ بالتعلم النشط: اختر العينات الأقل يقينًا أو تنوعًا، بحيث يمنحك كل علامة جديدة أقصى قدر من التحسين للنموذج [4].

ملاحظات ميدانية: أشياء صغيرة تصنع فرقًا كبيرًا ✍️

احتفظ تصنيف حي في مستودعك. تعامل معه ككود.
احفظ قبل وبعد كلما قمت بتحديث الإرشادات.
قم ببناء مجموعة ذهبية صغيرة ومثالية وحمايتها من التلوث.
تدوير جلسات المعايرة : عرض 10 عناصر، ووضع علامات عليها بصمت، والمقارنة بينها، ومناقشةها، وتحديث القواعد.
تحليلات مُصنِّف المسارات - لوحات معلومات قوية، بلا خجل. ستجد فرصًا للتدريب، وليس أشرارًا.
أضف اقتراحات مدعومة بالنماذج ببطء. إذا كانت التسميات الأولية خاطئة، فإنها تُبطئ البشر. إذا كانت غالبًا صحيحة، فهذا سحر.

ملاحظات أخيرة: الملصقات هي ذاكرة منتجك 🧩💡

ما هو جوهر تصنيف بيانات الذكاء الاصطناعي؟ إنه طريقتك في تحديد كيفية رؤية النموذج للعالم، قرارًا دقيقًا تلو الآخر. نفّذ ذلك بإتقان، وستصبح كل الخطوات اللاحقة أسهل: دقة أفضل، انحدارات أقل، نقاشات أوضح حول السلامة والتحيز، وتوصيل أكثر سلاسة. نفّذ ذلك بإهمال، وستظل تتساءل عن سبب خلل النموذج - بينما الإجابة موجودة في مجموعة بياناتك باسم خاطئ. لا يحتاج كل شيء إلى فريق عمل ضخم أو برنامج متطور - لكن كل شيء يحتاج إلى عناية.

طويل جدًا لدرجة أنني لم أقرأه : استثمر في منهجية واضحة، اكتب قواعد واضحة، قِس التوافق، امزج بين التصنيفات اليدوية والبرمجية، ودع التعلم النشط يختار أفضل ما لديك. ثم كرّر. مرة أخرى. ومرة أخرى... والغريب أنك ستستمتع بها. 😄

مراجع

[1] أرتستين، ر.، وبويسيو، م. (2008). توافق المُرمِّزات في اللغويات الحاسوبية . اللغويات الحاسوبية، 34(4)، 555-596. (يغطي κ/α وكيفية تفسير التوافق، بما في ذلك البيانات المفقودة.)
PDF

[2] المعهد الوطني للمعايير والتكنولوجيا (2023). إطار عمل إدارة مخاطر الذكاء الاصطناعي (AI RMF 1.0) . (الرقابة البشرية، والتوثيق، وضوابط المخاطر للذكاء الاصطناعي الموثوق).
PDF

[3] راتنر، إيه جيه، دي سا، سي، وو، إس، سيلسام، دي، وري، سي (2016). برمجة البيانات: إنشاء مجموعات تدريب كبيرة بسرعة . NeurIPS. (نهج أساسي للإشراف الضعيف وإزالة الضوضاء من العلامات المشوشة).
PDF

[4] لي، د.، وانغ، ز.، تشين، ي.، وآخرون (2024). دراسة استقصائية حول التعلم النشط العميق: التطورات الحديثة والآفاق الجديدة . (أدلة وأنماط التعلم النشط الفعال باستخدام التصنيفات).
PDF

[5] المعهد الوطني للمعايير والتكنولوجيا (2010). SP 800-122: دليل حماية سرية المعلومات الشخصية القابلة للتحديد (PII) . (ما هي المعلومات الشخصية القابلة للتحديد وكيفية حمايتها في مسار بياناتك).
PDF

اكتشف أحدث تقنيات الذكاء الاصطناعي في متجر مساعدي الذكاء الاصطناعي الرسمي

معلومات عنا

العودة إلى المدونة

البلد/المنطقة