Upload
joel-dawson
View
72
Download
6
Embed Size (px)
DESCRIPTION
שיעור 17 – Lexical Semantics. יעל נצר מדעי המחשב. Lexical Semantics – התחום העוסק במערכת מבוססת המשמעות של המילים. Lexeme – "כניסה בלקסיקון" שהוא אוסף של זוגות, המצמד מחרוזת כתובה (צורה אורתוגרפית) וצורה פונולוגית, עם ייצוג כלשהו של משמעות (ה- sense של המילה). - PowerPoint PPT Presentation
Citation preview
Lexical Semantics התחום העוסק – במערכת מבוססת המשמעות של המילים.
Lexeme כניסה בלקסיקון" שהוא אוסף של" – זוגות, המצמד מחרוזת כתובה )צורה
אורתוגרפית( וצורה פונולוגית, עם ייצוג כלשהו של המילה(.senseשל משמעות )ה-
.lexemesלקסיקון הוא קבוצה סופית של
מילונים
מילונים מכילים בד"כ מעגליות בהגדרות והכתוב בהם הוא בד“כ אינו הגדרות אלא תיאור של המילים בעזרת
מילים אחרות.Main Entry: 2left
Function: nounDate: 13th century1 a : the left hand b : the location or direction of the left side c : the part on the left side2
a : LEFT FIELD b : a blow struck with the left fist3 often capitalized a : the part of a legislative
4921278.odu
קשרים בין מילים
ובכל זאת, ניתן ללמוד הרבה על מילים מתוך ניתוח ותיוג הקשרים בינן ובין מילים אחרות.
הרעיון המנחה הוא שמילים אינן 'יחידות אטומיות' אלא יש להם מבנה פנימי שמשפיע, למשל, על האופי שבו הן
יכולות להופיע למשל עם מילים אחרות וליצור משפטים.
יש כמובן דרכים רבות להסתכל להגדיר ולנתח יחסים סמנטיים, והגישה כאן היא 'אפליקטיבית' – ופחות
בלשנית: איך נראים מקורות מידע על מילים, המספקים מידע סמנטי בצורה שימושית.
קשרים בין מילים
ניתן להגדיר יחסים בין מילים בצורות שונות, אבל לכמה יש ערך מוגבר ביישומים חישוביים. למשל, פעולה
substitutionחשובה ביותר היא פעולה של החלפה – אילו מילים, למשל , יכולות להחליף אחת את
השנייה.Homonymy
PolysemySynonymyHyponymy
Homonymy
הקשר בין מילים שלהן אותה צורה אך חסרות קשר במשמעותן.
bankדוגמא קלאסית: Instead, a bank can hold the investments in a custodial account in the client’s name.But as agriculture burgeons on the east bank, the river will shrink even more.
ואת השני bank1ניתן להחליף את המופע הראשון ב-, לציין שאלו מילים שונות שרק במקרה יש להן bank2ב-
אותה צורה אורתוגרפית.
homonymyכמה הערות על
beיש מילים שנשמעות אותו דבר איך אינן נכתבות אותו דבר vs. bee שלא יחשבו ,homonymy אלא
homophones.כלומר, רק מילים שלהן יש בד"כ "אותה כניסה בלקסיקון" הן
הומונימיות.יש מילים הומונימיות בכתיבה שמבוטאות אחרת – אלה יקראו
homographs.ובד"כ לא יחשבו כהומונימיות
וכידוע, יש מילים שנכתבות אותו דבר אך שייכות לחלקי דיבר אחרים – ונבדלות, למשל, בסביבה תחבירית שונה, וכן ההטיות
והגזירות האפשריות שונות עבורן. ,findמצד רביעי, יכול להיות דמיון מוחלט בין הטיות למשל
found-ו .found.)ייסד(
השפעת ההומונימיות באפליקציות
אם רוצים למצוא משמעות של מילה רב משמעית בהקשר מסוים, הגדרת הרב-משמעות
היא תלוית אפליקציה:found/foundedתיקון שגיאות: למשל –
גם ( to, two, too)זיהוי קול: מלבד הומופונימיות הומונימיות משפיעה: מאחר שמבוסס על מודל שפה
n-gram המילה הנפוצה יותר תקבל ניקוד גבוהה – יותר מתוך הסביבה שהיא מופיעה בה, וההפך.
.text to speechכמו גם באיחזור מידע או
Polysemy
פוליסמיות היא כאשר למילה יש כמה משמעויות הקשורות זו לזו.
While some banks furnish sperm only to married women, others are much less restrictive.
יהיה בלתי עקבי עם bank3לתת לבנק מסוג זה סימן מושג ההומונימיות.
לא תמיד זה כל כך ברור..ניתן לעיתים להסתמך על ההיסטוריה של המילה
etymology.)?( או לטעון לצירוף מקרים .
?Polysemyאיך מוצאים
בהנתן מילה, אפשר לשאול:מהן המשמעויות האפשריות של המילה?
האם הן קשורות אחת לשניה?איך ניתן להבחין ביניהן )בצורה "מבוססת"(?
לקסיקוגרפים הבונים מילונים משתמשים בד"כ בקורפוס גדול של השפה. במילונים לשימוש על
ידי אנשים בד"כ יש לכל מילה כניסות רבות אפשרי )בין אם הומונימי או senseעבור כל
פוליסמי(.
דוגמאות
They rarely serve red meat, preferring to prepare seafood, poultry or game birds.He served as US ambassador to Norway in 1976 and 1977.He might have served his time, come out and led an upstanding life.
Synonymy
שונות בעלי אותה משמעותlexemesמילים )אבל מה זה בדיוק 'בעלי אותה משמעות'?(
– שתי מילים יחשבו כמילים substitutabilityהחלפה נרדפות אם ניתן להחליף אותן במשפט בלי לשנות את
של המשפט.acceptabilityהמשמעות או את ה'נכונות' How big is that plane?Would I be flying on a large or small plane?אולם, אם מושג ה'החלפה' צריך להיות תקף בכל מופע של
המילה – אזי יש הרבה פחות מילים שהן נרדפות.לכן, צריך להוסיף למושג ההחלפה שמילים הן ברות החלפה –
נרדפות אם קיימות סביבות שבהן ניתן להחליפן זו בזו.
Synonymy
יכולת ההחלפה בהינתן זוג מילים מועמדות, תלויה בארבעה גורמים לפחות:
Polysemyגוונים דקים במשמעות
collocationsאילוצי register
השפעת פוליסמיות על נרדפות
Miss Nelson, for instance, became a kind of a big sister to Mrs. Van Tassel’s son, Benjamin.?Miss Nelson, for instance, became a kind of a large sister to Mrs. Van Tassel’s son, Benjamin.Big – polysemy =~ older, grown up
גוונים של משמעות – למילים נרדפות
What is the cheapest first class fare??What is the cheapest first class price?More of an intuition judgement.Fare – more for ‘services’Price – more for ‘objects’ like tickets.
תיאור מדויק יותר של ההבדלים מצריך בדיקה מדוקדקת יותר בקורפוס גדול.
Collocational constraints
שתי ההשפעות הקודמות מתייחסות למשמעות של המילה.
ההשפעות האחרות אינן סמנטיות:
הכוונה בקולוקציות מתייחסת לקשרים או ל'משיכה' בין -גרמים.nמילים כמו שניתן למשל לזהות במודלים
We frustrate them and frustrate them and pretty soon they make a big mistake.?We frustrate them and frustrate them and pretty soon they make a large mistake.
Register
ההקשרים החברתיים המשפיעים על השימוש במילים נרדפות )ע.ע. סיים וגמר(.
מילים לא ניתנות להחלפה בשל גורמים כגון נימוס, סטטוס, לחץ חברתי.
המשמעות החישובית של מילים נרדפות: תלוי באפליקציה, למשל ביצירת שפות טבעיות, תרגום
אוטומטי. פחות חשוב, למשל, באיחזור מידע.
Hyponymy
היפונימיות היא זוג שבו מילה אחת מתייחסת לתת קבוצה של השניה.
.vehicle ו-carלמשל hypernymyהיחס אינו סימטרי והיחס ההפוך נקרא
כמו ביחס המילים הנרדפות, ניתן לזהות היפונימיות על ידי החלפה מהסוג:
That is a x => That is a y, אזי אם המשפט y של hyponym הוא xאם
השמאלי נכון אז גם המשפט הימני נכון.
hyponymyהקשרים חישוביים ל-
אונטולוגיה – מתייחסת בד"כ לקב' האובייקטים המתארת תחום או 'עולם' )או תת עולם(.
, taxomonyאונטולוגיה מסודרת בד"כ באיזשהו איזשהו ארגון 'עצי'.
hound, muttלא בהכרח היררכיה – למשל המילים and puppy הן היפונימיות למילה dog אך בסוג
שונה של יחסים אחת מהשניה.יחסי היפונימיות אינם בונים אונטולוגיה או מבנה
היררכי, אך הם מספקים 'הערכה טובה' לכך.
Wordnet
הרעיון הוא לפתח לקסיקון ממוחשב המכיל את הקשרים בין המילים. מקורות אפשריים: מילונים
קיימים, תזארוסים, או בניית הלקסיקון מ'דף חלק'.Wordnet נבנה בשיטה השנייה, ע"י - Fellbaum
.1998ושות' מורכב משלושה בסיסי נתונים: אחד לשמות עצם, אחד
adverbs andלפעלים, והשלישי לשמות תואר adjectives.
closed classמילים השייכות לקבוצה הסגורה lexical items-אינן קיימות ב wordnet.
כניסות הן צורות אורטוגפיות ייחודיות, מלוות בקב' לכל צורה.sensesמשמעויות
יש:1.6בגירסא Category Unique SensesNouns 94474 116317Verb 10319 22066Adjective 20170 29881Adverbs 4546 5677
.c או מתוך ספריות shell, בbrowserניתן להשתמש ב
wordnetנתונים על
לכל כניסה - wordnetבגרסא המלאה, מכיל קב' של מילים נרדפות, הגדרה 'מילונית' , וכמה
דוגמאות לשימוש.
ובין homonymyאין הפרדה בין polysemy.
משקף את ההנחה שהפרדה כזו קשה להגדרה ונתונה לעיתים לשיפוט.
והמבדיל אותו ממילונים wordnetהייחוד ב-רגילים הוא בשימוש שהוא עושה בקב' יחסים
domain independent.בין המילים ,
היחסים מוגדרים על מילים, משמעויות או קב' מילים נרדפות. היחסים מוגבלים לאותו בסיס
נתונים )כלומר אותו חלק דיבר(.
טבלאות היחסים.604עמ'
synsets
הוא יכולת ההחלפה בין synonymyהבסיס ליחס ה-מילים בהקשר כפי שהוגדר קודם.
Synset:הוא קב' מילים נרדפות {chump, fish, fool, gull, mark, patsy, fall guy, sucker, schlemiel, shlemiel, soft touch, mug}
)בקיצור, פראייר.( synsets.בונים בעצם את המשמעות הנקשרת עם מילה
כאל המושג שמומש synsetכלומר, אפשר להתייחס ל-.lexicalizedבעזרת מילה בשפה
wordnet ב-hyponymyיחס ה-
wordnetהיחס, כפי שהוגדר קודם, קיים בומאפשר בניית שרשראות של יחסי היפרנימיות
)או היפונימיות( בין המילים.
הרצה ביוניקס:wn floor –hypenwn floor –hyponwn floor -synsn
Synonyms/Hypernyms (Ordered by Frequency) of noun floor7 senses of floor
Sense 1floor, flooring => horizontal surface, level
Sense 2floor, level, storey, story => structure, construction
Sense 3floor => control
Sense 4floor => land, dry land, earth, ground, solid ground, terra firma
Sense 5floor => surface, Earth's surface
Sense 6floor => hall
Sense 7floor => room
Hyponyms of floorHyponyms of noun floor2 of 7 senses of floor
Sense 1floor, flooring => bell deck => dance floor => floorboard
Sense 2floor, level, storey, story => basement, cellar => ground floor, first floor, ground level => loft, attic, garret => loft => mezzanine, mezzanine floor
(some )Hypernyms of floor
Sense 1floor, flooring => horizontal surface, level => surface => artifact, artefact => object, inanimate object, physical object => entity
Sense 2floor, level, storey, story => structure, construction => artifact, artefact => object, inanimate object, physical object => entity