![](/images/graphics-bg.png)
Improving the performance of theimage captioning systems using a pre- classification stage
العناوين الأخرى
تحسين أداء أنظمة وصف الصور باستخدام مرحلة التصنيف المسبق للصور
المصدر
Journal of Engineering Sciences and Information Technology
العدد
المجلد 6، العدد 1 (31 مارس/آذار 2022)، ص ص. 150-164، 15ص.
الناشر
تاريخ النشر
2022-03-31
دولة النشر
فلسطين (قطاع غزة)
عدد الصفحات
15
الملخص EN
In this research, we introduce a novel image classification and captioning system by adding a classification layer before the image captioning models.
The suggested approach consists of three main steps and inspired by the state- of- art that generating image captioning inside small sub- classes categories is better than the unclassified large dataset.
In the first one, we have collected a dataset of two international datasets (MS- COCO and Flickr2k) including 10778 images in which 80% is used for training and 20% for validation.
In the next step, dataset images have been classified into 11 classes (10 classes of indoor and outdoor categories and one class of "Null" category) and fed into a deep learning classifier.
The classifier is re- trained again using our classes and learned to classify each image to the corresponding category.
At the final step, each classified image is used as input of 11 pre- trained classified image captioning models, and the final captioning sentence is generated.
The experiments show that adding the pre- classification step before the image captioning stage improves the performance significantly by (8.15% and 8.44%) and (12.7407% and 16.7048%) for Top- 1 and Top- 5 of English and Arabic systems respectively.
The classification step achieves a true classification rate of 71.32% and 73.09% for English and Arabic systems respectively.
نمط استشهاد جمعية علماء النفس الأمريكية (APA)
Mualla, Rasha Muhammad& al-Khayr, Jafar& Sulayman, Samir. 2022. Improving the performance of theimage captioning systems using a pre- classification stage. Journal of Engineering Sciences and Information Technology،Vol. 6, no. 1, pp.150-164.
https://search.emarefa.net/detail/BIM-1408845
نمط استشهاد الجمعية الأمريكية للغات الحديثة (MLA)
Mualla, Rasha Muhammad…[et al.]. Improving the performance of theimage captioning systems using a pre- classification stage. Journal of Engineering Sciences and Information Technology Vol. 6, no. 1 (Mar. 2022), pp.150-164.
https://search.emarefa.net/detail/BIM-1408845
نمط استشهاد الجمعية الطبية الأمريكية (AMA)
Mualla, Rasha Muhammad& al-Khayr, Jafar& Sulayman, Samir. Improving the performance of theimage captioning systems using a pre- classification stage. Journal of Engineering Sciences and Information Technology. 2022. Vol. 6, no. 1, pp.150-164.
https://search.emarefa.net/detail/BIM-1408845
نوع البيانات
مقالات
لغة النص
الإنجليزية
الملاحظات
Includes bibliographical references : p. 162-164
رقم السجل
BIM-1408845
قاعدة معامل التأثير والاستشهادات المرجعية العربي "ارسيف Arcif"
أضخم قاعدة بيانات عربية للاستشهادات المرجعية للمجلات العلمية المحكمة الصادرة في العالم العربي
![](/images/ebook-kashef.png)
تقوم هذه الخدمة بالتحقق من التشابه أو الانتحال في الأبحاث والمقالات العلمية والأطروحات الجامعية والكتب والأبحاث باللغة العربية، وتحديد درجة التشابه أو أصالة الأعمال البحثية وحماية ملكيتها الفكرية. تعرف اكثر
![](/images/kashef-image.png)