إخراج مخطط أو وظيفة الخريطة (أزواج قيمة المفتاح) هو إدخال إلى المخفضيستقبل المخفض زوج القيمة الرئيسية من وظائف الخريطة المتعددة. بعد ذلك ، يقوم المخفض بتجميع مجموعات البيانات الوسيطة (زوج القيمة الرئيسية الوسيطة) في مجموعة أصغر من المجموعات أو أزواج القيمة الرئيسية وهو الناتج النهائي.
ماذا يفعل مصممو الخرائط ومخفضات السرعة؟
Hadoop Mapper هي وظيفة أو مهمة تستخدم لمعالجة جميع سجلات الإدخال من ملف وإنشاء الإخراج الذي يعمل كمدخل لـ Reducerينتج الإخراج عن طريق إرجاع جديد أزواج مفتاح القيمة. … يُنشئ مخطط الخرائط أيضًا بعض الكتل الصغيرة من البيانات أثناء معالجة سجلات الإدخال كزوج من قيمة المفتاح.
ما الفرق بين الرسام والمخفض؟
ما هو الفرق الرئيسي بين مصمم الخرائط والمخفض؟ مهمة مصمم الخرائط هي المرحلة الأولى من المعالجة التي تعالج كل سجل إدخال(من RecordReader) وينشئ زوجًا متوسطًا من قيمة المفتاح. يتم استدعاء طريقة التخفيض بشكل منفصل لكل زوج من قوائم المفاتيح / القيم.
كيف تحسب عدد مصمم الخرائط والمخفضات؟
يعتمد ذلك على عدد النوى ومقدار الذاكرة الموجودة على كل عبد. بشكل عام ، يجب أن يحصل مصمم الخرائط على من 1 إلى 1.5 نواة من المعالجاتلذلك إذا كان لديك 15 مركزًا ، فيمكن للمرء تشغيل 10 رسامين لكل عقدة. لذلك إذا كان لديك 100 عقدة بيانات في Hadoop Cluster ، فيمكن للمرء تشغيل 1000 مخطط في الكتلة.
كيف تعمل وظيفة مصمم الخرائط؟
Mapper هي وظيفة تعالج بيانات الإدخاليقوم المخطط بمعالجة البيانات وإنشاء عدة أجزاء صغيرة من البيانات. يكون الإدخال إلى وظيفة معين في شكل أزواج (مفتاح ، قيمة) ، على الرغم من أن الإدخال إلى برنامج MapReduce هو ملف أو دليل (يتم تخزينه في HDFS).
