نظام إجاد المستندات العربة المتشابهة بالمعنى والساق

إشرافستاذ الدك تور

أ باسل الخطب ال

ل المهندس كالسمحمد طال

تقدم وجدي بشارة القواص محمد

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

هدف المشروع. الوضع احلايل والتحديات. الوب الداليل. بنية النظام. نواة النظام. التطبيقات ادلمكنة. األسلوب ادلتبع يف تطوير النظامUP ادلشاكل. اآلفاق ادلستقبلية.

األهداف العامة –هدف المشروع

تطويع اآللة جلعلها تقوم بعملية زلاكمة منطقية كما العقل البشري. تدرك مفاىيميةحتويل النصوص اإللكتونية العربية من نصوص صماء إىل نصوص ،

.اآللة معناىا وداللتها

هدف المشروع

موسوعة )بناء نواة مساعدة للتطبيقات اليت تبحث يف رلال معاجلة اللغة العربية (.إخل...أنظمة السؤال واجلواب –قاموس -عربية

قياس نسبة التشابو بني مستندين مكتوبني باللغة العربية اعتمادا على ادلعت .والسياق

رلموعة من ادلستندات العربية باستخدام مقياس التشابو السابق عنقدة. إجياد ادلستندات ادلشاهبة دلستند.

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

ىدف ادلشروع. الوضع الحالي والتحديات. الوب الداليل. بنية النظام. نواة النظام. التطبيقات ادلمكنة. األسلوب ادلتبع يف تطوير النظامUP ادلشاكل. اآلفاق ادلستقبلية.

الوضع الحالي والتحديات

اقتصار معظم األحباث يف ىذا اجملال على تقنيات استجاع ادلعلوماتIR ، .وابتعادىا عن الداللة

اعتماد معظم األحباث على تعديل أحباث سابقة قائمة على اللغة اإلنكليزية. احمللل الصريف لـ : مثالStanford.

مشكلة التشكيل يف اللغة العربية. الوب”، “ كومبيوتر”الكلمات الدخيلة إىل اللغة العربية“.

الوضع الحالي والتحديات

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

ىدف ادلشروع. الوضع احلايل والتحديات. لوب الدالليا. بنية النظام. نواة النظام. التطبيقات ادلمكنة. األسلوب ادلتبع يف تطوير النظامUP ادلشاكل. اآلفاق ادلستقبلية.

ال تفهم معت اآللة احلايل الوب .النصوص

يفهم ما تعيده اإلنسان .اآللة

.والداللة اآللة واإلنسان كالمها يفهم ادلعت الوب الداليل

الوب الداللي

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

ىدف ادلشروع. الوضع احلايل والتحديات. الوب الداليل. بنية النظام. نواة النظام. التطبيقات ادلمكنة. ادلشاكل. اآلفاق ادلستقبلية.

بنية النظام

.نواة النظام. 1 .تطبيقات. 2

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

ىدف ادلشروع. الوضع احلايل والتحديات. الوب الداليل. بنية النظام. نواة النظام. التطبيقات ادلمكنة. األسلوب ادلتبع يف تطوير النظامUP ادلشاكل. اآلفاق ادلستقبلية.

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

نواة النظام. تدفق العمل. الدخل واخلرج. أنطولوجية Arabic WordNet. قياس ادلسافة بني كلمتني. قياس ادلسافة بني مجلتني. حل الغموض. العنقدة.

:تدفق العمل

مستند

Preprocessing

فهرسة

تخفيف الضجيج

حل الغموض

قواعد بيانات

مستند

مفاهيمي

مستندات

Postprocessing

حساب التشابه

عنقدة المستندات

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

نواة النظام. تدفق العمل. الدخل والخرج. أنطولوجية Arabic WordNet. قياس ادلسافة بني كلمتني. قياس ادلسافة بني مجلتني. حل الغموض. العنقدة.

1الدخل والخرج -نواة النظام

ذهب وفضة ذهب وفضة

تحويل الدخل من سلسلة من المحارف والكلمات إلى سلسلة من المفاهيم

2الدخل والخرج -نواة النظام

أكل الولد التفاحة

تناول الطفل الموزة

أكل الولد التفاحة

تناول الطفل الموزة

مقارنة المدخالت بالمعنى والسياق وإعطاء نسبة التشابه

راضة أمراضحرب

لبنان ذهب

3الدخل والخرج -نواة النظام

عنقدة المدخالت

التنقب عن

...الذهب

التنقب عن

...الذهب

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

نواة النظام. تدفق العمل. الدخل واخلرج. أنطولوجية Arabic WordNet. قياس ادلسافة بني كلمتني. قياس ادلسافة بني مجلتني. حل الغموض. العنقدة.

Arabic WordNet -نواة النظام

تضم كلمات اللغة العربية ضمن رلموعة متادفات أنطولوجية. ترتبط رلموعة ادلتادفات فيما بينها بعالقات داللية. حتوي على مفاىيم وكلمات.

ادلفهوم ىو رلموعة من الكلمات ادلتادفة مونةأكل، طعام، غذاء، قوت، سفرة، زاد، {يضم الكلمات “ أكل”ادلفهوم{

عدد المفاهيم عدد الكلمات

8 9

Arabic WordNet -نواة النظام

مادة

مادة صلبة، مادة قاسة

عنصر

معدن غاز خامل

حدد

حدد منصهر

معدن كرم

ذهب فضة بالتن

Arabic WordNet الـشجرة

Arabic WordNet -نواة النظام

–ضرب

ضاعف

زاد

غر

-ضرب

قرع

أصدر

صوت

نبه

–ضرب

أطلق

جرح

أوجع

وعك

ضرب

أثر

فعل

ضرب ضرب

اسم

عمل

عمل

جماع

عقاب

عقاب

جسدي

نشاط

إجراء

حساب

عملة

حسابة

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

نواة النظام. تدفق العمل. الدخل واخلرج. أنطولوجية Arabic WordNet. قياس المسافة بين كلمتين. قياس ادلسافة بني مجلتني. حل الغموض. العنقدة.

1مقياس المسافة –قياس المسافة بين كلمتين -نواة النظام

وسلة

انتقال

مركبة

مركبة ذات عجلة

دراجة، دراجة هوائة

آل، أوتوماتك

سارة شاحنة

2مقياس المسافة –قياس المسافة بين كلمتين -نواة النظام

وسلة

انتقال

مركبة

مركبة ذات عجلة

دراجة، دراجة هوائة

آل، أوتوماتك

سارة شاحنة

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

نواة النظام. تدفق العمل. الدخل واخلرج. أنطولوجية Arabic WordNet. قياس ادلسافة بني كلمتني. قياس المسافة بين جملتين. حل الغموض. العنقدة.

بدون حل الغموض –قياس المسافة بين جملتين –نواة النظام

قطر الدائرة عدد موجب

الدوحة 0.67 0.73 0.14 0

عاصمة 0.43 0.46 0.12 0

قطر 1 0.77 0.62 0

SIM

2.19 2.39

3 4

مع حل الغموض –قياس المسافة بين جملتين –نواة النظام

قطر الدائرة عدد موجب

الدوحة 0 0 0 0

عاصمة 0 0 0 0

قطر 0 0 0 0

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

نواة النظام. تدفق العمل. الدخل واخلرج. أنطولوجية Arabic WordNet. قياس ادلسافة بني كلمتني. قياس ادلسافة بني مجلتني. حل الغموض. العنقدة.

كيفية حل الغموض –نواة النظام

عدد يبلغ الرائعة قطر عاصمة ىي الدوحة مدينة تقع .2005 عام لتعداد وفقا 400,051 سكاهنا

على قطر جزيرة ولشب الشرقي الساحل منتصف يف احلكومية الدوائر فيها توجد . العريب اخلليج شاطئ

ميناء وفيها والتجارية ادلالية وادلؤسسات والوزارات أحناء مبختلف يربطها حديث ومطار كبري جتاري وادلباين ادلساجد بكثرة الدوحة مدينة وتشتهر العامل

الكتب دار وأمهها بادلكتبات تزداد كما احلديثة قناة مكتب يتخذ كما الوطنية، وادلكتبة القطرية الدوحة مدينة .للقناة رئيسيا مقرا منها اجلزيرة اليت ، 2006 اآلسيوية األلعاب دورة تنظيم عرفت تنضم العامل يف اسيوية العاب دورة أكرب كانت

للتنمية الدوحة جولة ادلدينة يف إنعقد .اللحظة حىت التجارة دلنظمة جتارية دلفاوضات جولة أول وىي

العادلية

مدينة الدوحة عاصمة قطر

نافذة حل الغموض

كيفية حل الغموض –نواة النظام

عدد يبلغ الرائعة قطر عاصمة ىي الدوحة مدينة

تقع .2005 عام لتعداد وفقا 400,051 سكاهنا على قطر جزيرة ولشب الشرقي الساحل منتصف يف

احلكومية الدوائر فيها توجد . العريب اخلليج شاطئ ميناء وفيها والتجارية ادلالية وادلؤسسات والوزارات

أحناء مبختلف يربطها حديث ومطار كبري جتاري و ادلساجد بكثرة الدوحة مدينة وتشتهر العامل دار وأمهها بادلكتبات تزداد كما احلديثة ادلباين

يتخذ كما الوطنية، ادلكتبة و القطرية الكتب مدينة .للقناة رئيسيا مقرا منها اجلزيرة قناة مكتب اآلسيوية األلعاب دورة تنظيم عرفت الدوحة يف اسيوية العاب دورة أكرب كانت اليت ، 2006

جولة ادلدينة يف إنعقد .اللحظة حىت تنضم العامل جتارية دلفاوضات جولة أول وىي للتنمية الدوحة العادلية التجارة دلنظمة

مدينة الدوحة عاصمة قطر الرائعة

نافذة حل الغموض

كيفية حل الغموض –نواة النظام

عدد يبلغ الرائعة قطر عاصمة ىي الدوحة مدينة

تقع .2005 عام لتعداد وفقا 400,051 سكاهنا على قطر جزيرة ولشب الشرقي الساحل منتصف يف

احلكومية الدوائر فيها توجد . العريب اخلليج شاطئ ميناء وفيها والتجارية ادلالية وادلؤسسات والوزارات

أحناء مبختلف يربطها حديث ومطار كبري جتاري و ادلساجد بكثرة الدوحة مدينة وتشتهر العامل دار وأمهها بادلكتبات تزداد كما احلديثة ادلباين

يتخذ كما الوطنية، ادلكتبة و القطرية الكتب مدينة .للقناة رئيسيا مقرا منها اجلزيرة قناة مكتب اآلسيوية األلعاب دورة تنظيم عرفت الدوحة يف اسيوية العاب دورة أكرب كانت اليت ، 2006

جولة ادلدينة يف إنعقد .اللحظة حىت تنضم العامل جتارية دلفاوضات جولة أول وىي للتنمية الدوحة العادلية التجارة دلنظمة

مدينة الدوحة عاصمة قطر الرائعة يبلغ

نافذة حل الغموض

كيفية حل الغموض –نواة النظام

عدد يبلغ الرائعة قطر عاصمة ىي الدوحة مدينة

تقع .2005 عام لتعداد وفقا 400,051 سكاهنا على قطر جزيرة ولشب الشرقي الساحل منتصف يف

احلكومية الدوائر فيها توجد . العريب اخلليج شاطئ ميناء وفيها والتجارية ادلالية وادلؤسسات والوزارات

أحناء مبختلف يربطها حديث ومطار كبري جتاري و ادلساجد بكثرة الدوحة مدينة وتشتهر العامل دار وأمهها بادلكتبات تزداد كما احلديثة ادلباين

يتخذ كما الوطنية، ادلكتبة و القطرية الكتب مدينة .للقناة رئيسيا مقرا منها اجلزيرة قناة مكتب اآلسيوية األلعاب دورة تنظيم عرفت الدوحة يف اسيوية العاب دورة أكرب كانت اليت ، 2006

جولة ادلدينة يف إنعقد .اللحظة حىت تنضم العامل جتارية دلفاوضات جولة أول وىي للتنمية الدوحة العادلية التجارة دلنظمة

مدينة الدوحة عاصمة قطر الرائعة يبلغ عدد

نافذة حل الغموض

كيفية حل الغموض –نواة النظام

عدد يبلغ الرائعة قطر عاصمة ىي الدوحة مدينة

تقع .2005 عام لتعداد وفقا 400,051 سكاهنا على قطر جزيرة ولشب الشرقي الساحل منتصف يف

احلكومية الدوائر فيها توجد . العريب اخلليج شاطئ ميناء وفيها والتجارية ادلالية وادلؤسسات والوزارات

أحناء مبختلف يربطها حديث ومطار كبري جتاري و ادلساجد بكثرة الدوحة مدينة وتشتهر العامل دار وأمهها بادلكتبات تزداد كما احلديثة ادلباين

يتخذ كما الوطنية، ادلكتبة و القطرية الكتب مدينة .للقناة رئيسيا مقرا منها اجلزيرة قناة مكتب اآلسيوية األلعاب دورة تنظيم عرفت الدوحة يف اسيوية العاب دورة أكرب كانت اليت ، 2006

جولة ادلدينة يف إنعقد .اللحظة حىت تنضم العامل جتارية دلفاوضات جولة أول وىي للتنمية الدوحة العادلية التجارة دلنظمة

الدوحة عاصمة قطر الرائعة يبلغ عدد سكاهنا

نافذة حل الغموض

كيفية حل الغموض –نواة النظام

عدد يبلغ الرائعة قطر عاصمة ىي الدوحة مدينة

تقع .2005 عام لتعداد وفقا 400,051 سكاهنا على قطر جزيرة ولشب الشرقي الساحل منتصف يف

احلكومية الدوائر فيها توجد . العريب اخلليج شاطئ ميناء وفيها والتجارية ادلالية وادلؤسسات والوزارات

أحناء مبختلف يربطها حديث ومطار كبري جتاري و ادلساجد بكثرة الدوحة مدينة وتشتهر العامل دار وأمهها بادلكتبات تزداد كما احلديثة ادلباين

يتخذ كما الوطنية، ادلكتبة و القطرية الكتب مدينة .للقناة رئيسيا مقرا منها اجلزيرة قناة مكتب اآلسيوية األلعاب دورة تنظيم عرفت الدوحة يف اسيوية العاب دورة أكرب كانت اليت ، 2006

جولة ادلدينة يف إنعقد .اللحظة حىت تنضم العامل جتارية دلفاوضات جولة أول وىي للتنمية الدوحة العادلية التجارة دلنظمة

حكومية وزارات مؤسسات ادلالية التجارية ميناء جتاري

نافذة حل الغموض

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

نواة النظام. تدفق العمل. الدخل واخلرج. أنطولوجية Arabic WordNet. قياس ادلسافة بني كلمتني. قياس ادلسافة بني مجلتني. حل الغموض. العنقدة.

K-means العنقدة –نواة النظام

ادليزات: العنقدةمقياس معياري خلوارزميات. البساطة –السرعة. السيئات:

ال ميكن حتديد أفضلK. العشوائية يف اختيار مراكز العناقيد. صلبة وغري ىرمية عنقدةخوارزمية.

Bisecting K-means العنقدة –نواة النظام

احلل :BiSecting K-means والليونة إضافة صفة اذلرمية. متاما اختيار ادلراكز ليس عشوائي.

Bisecting K-means العنقدة –نواة النظام

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

ىدف ادلشروع. الوضع احلايل والتحديات. الوب الداليل. بنية النظام. نواة النظام. التطبيقات الممكنة. األسلوب ادلتبع يف تطوير النظامUP ادلشاكل. اآلفاق ادلستقبلية.

Arapedia –التطبيقات

البحث الداللي – Arapedia –التطبيقات

صوت

:نتائج البحث

الموسيقى اإللكترونية.

الموسيقى اإلرتجالية.

موسيقى الريف.

Arapedia –التطبيقات

المستندات المتشابهة – Arapedia –التطبيقات

الذهب وماأدراك ما الذهب ؟؟؟؟؟

كفة فصل الذهب من الخام تتنوع

وسائل الحصول على الذهب وذلك

وتم الحصول . حسب المواد المترسبة

-: على معدن الذهب كما ل

تفرق معدن -الحصول على الخام

.الذهب عن الخام

:المستندات المشابهة

كيفية فصل الذهب عن الخامات.

تطور التنقيب عن الذهب.

Arapedia –التطبيقات

الترجمة الداللية – Arapedia –التطبيقات

مدينة الدوحة

سكانها عدد بلغ الرائعة قطر دولة عاصمة ه

منتصف ف تقع . عام لتعداد وفقا ,

الخلج شاطئ على قطر جزرة لشبة الشرق الساحل

والوزارات الحكومة الدوائر فها توجد . العرب

كبر تجاري مناء وفها والتجارة المالة والمؤسسات

مدنة وتشتهر العالم أنحاء بمختلف ربطها حدث ومطار

تزداد كما الحدثة المبان و المساجد بكثرة الدوحة

الوطنة، المكتبة و القطرة الكتب دار وأهمها بالمكتبات

.للقناة رئسا مقرا منها الجزرة قناة مكتب تخذ كما

اآلسوة األلعاب دورة تنظم عرفت الدوحة مدنة

تنضم العالم ف اسوة العاب دورة أكبر كانت الت ،

ه و للتنمة الدوحة جولة المدنة ف إنعقد .اللحظة حتى

العالمة التجارة لمنظمة تجارة لمفاوضات جولة أول

رط ق In English: Qatar an Arab country on the peninsula of Qatar; achieved independence from the United Kingdom in 1971; the economy is dominated by oil Qatar State_of_Qatar Katar State_of_Katar

رط ق In English: diameter the length of a straight line

passing through the center of a

circle and connecting two points

on the circumference diameter

diam

Arapedia –التطبيقات

الداللية العنقدة – Arapedia –التطبيقات

Level 4

Level 3

Level 2

Level 1 Cluster

1

Cluster 1.1

Cluster 1.1.1

Cluster 1.1.2

Cluster 1.1.2.1

Cluster 1.1.2.2

Cluster 1.2

اسألني –التطبيقات

لنيأ

اسا

االستفسار الدالل

...

االستفسار الداللي – اسألني –التطبيقات

من هو رئيس القطر العربي

السوري

من رئيس الجمهورية العربية

السورية؟

من هو الرئيس ؟السوري

الرئيس بشار األسد

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

ىدف ادلشروع. الوضع احلايل والتحديات. الوب الداليل. بنية النظام. نواة النظام. التطبيقات ادلمكنة. األسلوب المتبع في تطوير النظامUP. ادلشاكل. اآلفاق ادلستقبلية.

UPاألسلوب المتبع في تطوير النظام

Augmented WebHelix

Design pattern

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

ىدف ادلشروع. الوضع احلايل والتحديات. الوب الداليل. بنية النظام. نواة النظام. التطبيقات ادلمكنة. األسلوب ادلتبع يف تطوير النظامUP المشاكل. اآلفاق ادلستقبلية.

.المشاكل

عدم اكتمالArabic WordNet عدم توفر زللل صريف وحنوي ميكن الوثوق بنتائجو. صعوبة الوصول إىل حل هنائي دلشكلة الغموض يف اللغة العربية.

مثال: ذىب الرجل إىل السوق ويف جيبو ذىب.

نظام إيجاد المستندات العربية المتشابهة بالمعنى والسياق

ىدف ادلشروع. الوضع احلايل والتحديات. الوب الداليل. بنية النظام. نواة النظام. التطبيقات ادلمكنة. األسلوب ادلتبع يف تطوير النظامUP ادلشاكل. اآلفاق المستقبلية.

.اآلفاق المستقبلية

األنطولوجيةاستكمال بناء : زلاولة التغلب على ادلشاكل والصعوبات مثل

.العربيةبناء زللل صريف وحنوي يكون رديفا للنظام. متابعة السعي يف تطوير صناعة احملتوى الرقمي العريب. تطوير اخلدمات األخرى ضمن النظام.

نظام إجاد المستندات العربة المتشابهة بالمعنى والساق