A GRAMMAR CHAECKER
Transcript of A GRAMMAR CHAECKER
1
هقذه
اص د خضء اػبػی یی غي یش االیی # Language Checker$ ش ثشب غي یش صثب
ث یبت شثى ث تـخیق تلحیح غي یش االیی الغي یش دػتسی تـىی ؿذ اػت.
دس حبیى غي یش دػتسی ثب تبی غي بی خد دس حذد ی ؿذ وبت خد دس یه ت
ثبفت، و خضء ثضستشی ؼجت ث و حؼة ی ؿد، اخ اػت. ث س وی دػتس، د ای اص
$تىی بیی اص وبت# وبت اػت. تدضی تحی لای ػبختبسی حبو ثش ثذب، جبسات، چبه ب
#، حشف سثی حشف ذا Post Positionsب $ذی، هبیش، كفبت، افب، پؼبیكشفی دس م بی اػ
ث وبس شفت ی ؿد. پؼبیذبیی و ث كست بی فشد خ اػبی افضد ی ؿذ ثب یىذیش تفبت
داسذ. كست ایدبد ؿذ اػ پغ اص فشآیذ پؼبیذػبصی، كست غیشؼتمی آ اػ بیذ ی ؿد
$Oblique#.
ی ثبیؼت تبی اؿىب تلشیفی اص خد ـب ی دذ اص آدبیی و هبیش سفتبس ثؼیبس ثی لبذ ای
ى سا ثشای تبی هبیش خت شاحی اخشای یه ثشب غي یش دػتسی فشػت د. دس ثحث
صثب ایؼی افب ثب لبذ ای كشف افب، سیـ ف ث س اص كست بی فی خذا ی ؿد. دس
خد داسد و ثبیذ شا ثب افب ثی لبذ دس یه ػیؼت غي یش دػتسی فشػت ؿذ. دس خلف
كشف كفبت یض ی تا دس ثوی اص صثب ب بذ ایؼی ث اسدی اؿبس د و دس آ كفبت ث د
تی و اص اػ ـتك ی كفب ثشای، دس ای حبت ثبیذ یب م اؿتمبلی تلشیفی تمؼی ی ؿذ. ال
یب كفبتی و اكال اؿتمبلی "readable" یض كفبت ـتك ؿذ اص ف، ث "atomic"ؿذ، بذ
یؼتذ، تفبت لبئ ؿی. ثال دس ثی كفبتی و اص اػ ـتك ی ؿذ یض ی ثبیؼت یب كفبت
تبیض لبئ ؿی. "atomic" یب اػبی ب، بذ "American"خبف، ث ـتك ؿذ اص اػبی
افب، حشف سثي حشف ذا جم بی اخضای وال ؼتذ و ثشای تدضی تحی آ ب ثبیذ اص
ی اص سیىشد لب حس اػتفبد د. ثب افضد پؼبیذب ث اػ،ف هیش ی تا لیذ ػبخت. دس ثو
د ای اص لیذ بی ـتك ؿذ ث س یذ بی غیشتلشیفی یض خد داسد. صثب ب بذ ذی، ل
ی ؿذ. خدوبس دس ػح كشف پؼبیذب، اػبی، افب هبیش حب
2
غي یش دػتسی یىی اص تشی ؼتشد تشی اثضاسبیی اػت و دس حص پشداصؽ صثب
دسػت ب دسػتسد. ث س وی دس دػتس صثب جیی تبیض ـخلی ثی خالت جیی وبسثشد دا
غي یش دػتسی، ػبختبس دػتسی خالت سا ثشاػبع فشآیذبی كشفی یض حی سد خد داسد.
ی دذ دس كست ثشص خب ث وبسثش ـذاس ی دذ.ای د شح ثخـی اص پشداصؽ صثب ثشسػی لشاس
ی سا تـىی ی دذ و ثشای دسن دسیبفت صثب بی جیی ؤثش ی ثبؿذ. فشآیذ كشفی شح جی
بی غیش غی بذ الت زاسی تدضی ای اػت و دس آ اخضای تـىی دذ غبت یض ـب
د و ساثي وبت ث ػبختبسبیی تجذی ی ؿ#. دس فشآیذ حی، تای خی parsingی ؿذ $
وبسایی ثشب غي یش دػتسی غبجب دػتسی یب وبت سا دس خ ـب ی دذ. دس اكالح سایبـی،
ذ ثذ ثب ای خد ی تا ذ.سا ـب ی د #Word processerیه ثشب ثضستش بذ پشداصؿش غی$
حبت صبی و ثشب بی یشایـش ت ؿش ث ذ و دس ای ثبؿ اتىب ث ثشب دیشی یض وبسثشد داؿت
وبس ی وذ ای غي یش ب یض فب ی ؿذ. دس پیبد ػبصی غي یش دػتسی اص فشآیذ پشداصؽ صثب
جیی اػتفبد ی ؿد.
یذ غي یش دػتسی دس فبسی صثب وبسثشد ؼتشد ای داسد. غي یشبی دػتسی وبسآذ ػبختبس پیچ
وب سا ثشای یه صثب جیی ؿت اب دس الیت ث شچ ی تا یه دػتس كسی ؼجتبتشی داسذ. ا
ت خد اػتثبئبت ثؼیبس، ثب اػتفبد اص دػتسبی كسی ی تا ث شاحی پیبد ػبصی یه غي
یبس ـخلی داسد دس حبیى صثب یش دػتسی پشداخت. صیشا صثب ثشب یؼی وبپیتش، ح دػتس ثؼ
خد دس یه صثب جیی ای یؼت. ش غي یش دػتسی ؿب یه دیىـشی اػت و تب غبت
ثبیذ اؿبس د و ای اخضای وال ش و یض دس آ ثشچؼت زاسی ؿذ اػت. فشػت شدیذدس آ
داسد. ایت ثؼضاییدػتسی بیغي یش ثخؾ دس شاحی
ای الیت و ش و دس صثب جیی ی تاذ اخضای وال ثؼیبس تفبتی داؿت ثبؿذ، ػجت افضایؾ
پیچیذی دس شاحی پیبد ػبصی غي یشبی دػتسی ی ؿد. ح ىشد غي یش دػتسی ثذی
تد ی وذ ػپغ خالت سا كست اػت و اثتذا ش خ سا دس ت یبفت آ سا دس فش غت خؼ
ث كستی تدضی ی وذ و ثب دػتس سد ش بثمت داؿت ثبؿذ. ش ثشب غي یش دػتسی ی تاذ
3
ثب اػتفبد اص لای ختف، غي بی بی سا بذ ذ تبثك صبی، ؿبس، ؿخق یب ذ خد
ثب اػتفبد اص ای ثشب ی تا ثشخی اص ـىالت ػجىی سا دجب كحیحی اص غبت تـخیق دذ. چی
دس ت تـخیق داد. ث ا ثب اػتفبد اص افب د دس ثوی اص حص ب، اص ش ػجه ؿتبسی
سد اتمبد ال ؿذ اػت و دس ایدب غي یش دػتسی ی تاذ خالت د سا تـخیق داد ؿى
یـبد دذ. آ سا پ
بكش ش افضاسی سد یبص ثشای غي یش دػتسی ؿجبت ثؼیبسی ثب ش افضاسبی تـخیق كت داسد.
دس فشآیذ تـخیق كت، ثب تدضی ػبختبس خ ی تا دسػت تشی و سا ثشاػبع اخضای وال
# ثشای تـخیق غبتی passing$ ضیخبیب آ دس خ پیؾ ثیی د. دس غي یش دػتسی اص تد
ی ؿد و اص دػتس خبكی تجیت ی وذ. اػتفبد
تحمیمبتی پیشا اسیت بی پیـشفت ای كست شفت اػت و ی تاذ غي یشبی اخیشا
Googleث ش افضاسبی دػتسی سا ثشاػبع ثبفت ش و تـخیق دذ و دس ای یب ی تا
wave ،White smoke ، Microsoft 2010 غیش اؿبس د. غي یشبی االیی ای اص
اثضاسبی وی دس ؿت ت صثب بی خبسخی حؼة ی ؿذ و ػخیب غیش ثی ش صثب
دیش اثضاسبی چ ی تاذ ثشای غي یشی اكالح ؿت بی خد اص آ ثش ثیشذ. شچذ و
دس تـخیق خب دچبس یض غبجب وىی ؿتبسی وبپیتشی بذ غي یش االیی، غي یش دػتسی
تمذ ، صثب ؿبع، ـى ی ؿد ت دسػت سا، بدسػت پش غي تـخیق ی دذ. خفشی. ن. ث
ی آ، الجی سا یض دس ثش داسد. غي اػت اػتفبد اص یه ثشب غي یش االیی ببػت ال ثش ضایب
یشیی االیی شاشی ی تاذ دس صثب بی ختف ػجت ثشص ـىالت خبكی ی ؿد. ث س ثب،
و یه ت دسػت ث ش ی سػذ اب داسای خببی دػتسی یب االیی اػت یب ایى وبتی دس حبی
اؿىب داسذ، ث كست یه و بدسػت ـخق ی ؿذ. غي و دس صثب بی تفبت ث حب االیی
یشبی دػتسی، االیی ػجىی دس صثب ایؼی ثخـی اص ثشب پشداصؿش غی ی اػت و ی
ثؼیبسی اص غي یشبی دػتسی ثشاػبع لای دػت یؼی ثیؼت ػب اخیش سؿذ ؼتشؽ یبفت اػت.
4
ای خد تخللب ای حص ی ای ػب ب ثب ثشسػی ثشخی اص سؽ بی ؿذ ی وذ. ثب
یبدیشی بؿیی یض سیىشدبی آبسی ث دجب تـخیق خببی وی سف ای ـىالت ثد اذ.
غلط گیزی ای دستریپیشی ظزی
دػتسی ث وبسثشا وه ی وذ تب ثتاذ اػبد ت خد سا ثب خببی وتشی غي یشبی
ي یشی بی االیی ػدذ ی ثیؼذ یی ثتاذ ت ثتشی اسائ دذ ثذی حب ث اذاص غ
ذ؛ اجت شاحی پیبد ػبصی آ ب دس كست داسا ثد یظی بی ری ثش ثخؾ اػت: ثبؿ
ب ثبیذ اص ػشت ثبال خت ثشلشاسی استجبى تمبث ثب وبسثش ثشخسداس ثبؿذ. آ
ثبیذ ثتا آ ب سا دس پشداصؿشبی غی خد ث س ؼد ث خثی پیبد ػبصی
د.
.آ ب جبیذ اص خالت كحیح ث حب ػجىی ػبختبسی ایشاد ثیشذ
ست یشد و ثتاذ پبػخی یبصبی ؿخلی وبسثشا شاحی آ ب ثبیذ ث ای ك
ثبؿذ.
دس بیت پیبد ػبصی آ ب ثبیذ تب حذ اىب وب پیـشفت ثد تب ثتاذ ثیـتشی
خببی خد دس ت سا ثب ثتشی ویفیت ؿبػبیی وذ.
ف جم ثذی د و دس ایدب ی تا ث چذ ؿی ختسا ثؼیبسی اص خببی ى دس ت ؿتبسی
ث روش چبس م پشداخت ی ؿد:
: تـخیق ای خبب ث حص ىشد ثشب بی غي یش االیی شثى خطاای اهالیی -
ی ؿد. یه ش افضاس غي یش االیی ثب مبیؼ وبت خد دس ت ثب فشػت وبت ؿبخت
ؿذ دس ػیؼت $و لجال دس دیىـشی ثشب رخیش ؿذ اذ# ی تاذ خبب سا تـخیق دذ.
فشػت سد ش خد جبؿذ، ػیؼت آ سا ث ا یه و بدسػت دس ش اش و ای دس
ی یشد؛ اص ای س ػیؼت وبت ـبث سا ث ا وبت خبیضی ث وبسثش پیـبد ی دذ.
5
سا پیـبد ی دذ. waterسا تبیپ ی وذ اب ػیؼت غت water*ث ا ثب، وبسثش غت
$الت ػتبس ـب بدسػت ثد و اػت.#
: خببیی و خد آ دس خ ػجت ی ؿد آ خ ثب لای دػتسی خطاای دستری -
صثب سد ش خای ذاؿت ثبؿذ. ثشخالف غي یش االیی، غي یش دػتسی ث االبت
My brother isشیك آ ثتاذ یه خبی ای چیی سا ثیبثذ: شثى ث ثبفت یبص داسد و اص
older then than my sister.
سا ث ا و than سا ث ا خب دػتسی تـخیق ی دذ و thenدس ایدب ػیؼت و
س خدوبس كحیح پیـبد ی دذ. صیشا لب كفت تفویی دس شاحی ثشب لیذ شدیذ ػیؼت ث
ثب مبیؼ خ وبسثش ثب لب سد ش ثالفبك ی تاذ خب سا تـخیق دذ.
ی تا ث كشاحت فت و آیب خبی سخ داد، خبی تبیپی ثد اػت یب ایى دس ای حبت ال
غي یش االیی ی اػتفبد وشد اػت. اجت thanث خبی thenوبسثش دچبس ػء تفب ؿذ اص و
ی و یتاذ چی خبیی سا ثیبثذ صیشا ش د و خضء وبت ثب لبذ دس صثب ایؼی ؼتذ. اص آدب
دس ایدب ثبث اص ثی سفت ػبختبس دػتسی دسػت ی ؿد ثبثشای آ سا ث ا یه then اػتفبد اص
ثش صد ػبختبس دػتسی، بی خ یض دچبس خبی دػتسی دس ش ی یشی. شچذ و ال
ـى ی ؿد.
ث س وی خببی دػتسی سا ی تا ث د ش تمؼی وشد: خببی ػبختبسی خببی غیش
ػبختبسی.
خببی ػبختبسی آ دػت اص خببیی ؼتذ و تب ثب دسج، حزف یب خبث خبیی یه یب چذ و ی
دس مبث خببی غیش ػبختبسی دس كستی اكالح ی ؿذ و ثتا وبت سا تلحیح د. تا آ ب
خد دس ت سا ثب وبت تفبتی خبیضی د. خببی دػتسی اص خ دؿاستشی پیچیذ تشی
ی صش س اا خببی صثبی ؼتذ صیشا دػتس یه صثب ؿب لای ؼتشد اػتثبئبت خبكی د
اػت. ال ثشای، پیچیذی دػتس دس ت الی ثؼیبس افضایؾ ی یبثذ صیشا دس ایدب ثب اػتثبئبت
6
ػبختبسبی حی پیچیذ تی سث س ؼتی و تب حذی ثب ثشسػی بی شی دػتس لبث پیؾ ثیی
ی ثبؿذ.
اػت و ثتاذ ثشای تبی ـىالتی و وبسثش ى تب و وتبة یب فش غت دػتسی اسائ ـذ
اػت دس ؿت ثب آ ب اخ ؿد، سا حی پیـبد دذ. ؿه تشدیذبیی و وبسثش دس فشآیذبی
ث ساثي یب احذبی اطبی شثى ی ؿد یب ایى بی ؿتبسی ثب آ ب اخ ی ؿد یـ
تاذ چی ساثی سا تـخیق دذ دس تید ثب ـى س ث س ی ؿد ی داذ ی البت وبسثش
وذا ػبختبس سا ثبیذ ث وبس ثیشد. سؽ بی لب ذاس ؤثشی ثشای تـخیق خدوبس خببی دػتسی
مبث، پیبد اسائ ؿذ اذ اب ای سؽ ب ثؼیبس ضی ثش صب ثش ثد ابف پزیش ی ثبؿذ؛ دس
شی ثشخسداس ػبصی سؽ بی آبسی ػشی تش آػبتش اػت اص ابف پزیشی یض ػبصبسی ثیـت
ذ. ی ثبؿ
تای ػجت ی ؿد: اػتفبد اص وبت بتذا ػبختبسبی پیچیذ خالت خطاای سثکی -
ت یض وبؾ ی یبثذ ث یه ت سا ث خثی دسن بئی و دس ای كست لبثیت پزیشؽ
ذست ی تا اص چی ت بیی اػتفبد د. ثبثشای ی ثبیؼت ای خبب سا دس صش
خببی ػجىی دس ش شفت. ثشخالف خببی دػتسی، خببی ػجىی ث ؿذت ث لیت
ثذی د. ث س ت ثؼتی داسد و ثبیذ ش سد سا ث ا یه خبی ػجىی جم
ثب، اش ثخای ثب دػتب خد اص شیك ایی استجبى ثشلشاس وی ی تای اص صثب ث ای
خاللب اثتىبسی اػتفبد بئی $غیشسػی# دس حبی و ؼتذ ػبصی بی فی ثبیذ بسی اص
ایی داسد دس حبیى دس غي اثب ثبؿذ $سػی#. پیىش ثذی دس غي یشی ػجىی ایت ثؼض
یشی دػتسی تب ای اذاص سد تخ لشاس ی یشد.
: خ ای و اص ش االبتی بدسػت اػت یچ یه اص خببی ػجىی، خطاای هعایی -
دػتسی االیی سا ؿب ی ؿد، اص ش بیی دچبس ـى ی ؿد. تـخیق خببی
اسی اص یه داؾ خبی ػی اػت اص ای س ػیؼت ال دس تـخیق بیی یبصذ ثشخسد
7
خدوبس ای خبب ثب ـى اخ ی ؿد صیشا ث خدی خد ی تاذ اص چی داـی
ثشخسداس ثبؿذ.
و تكیف وذ چی ػبختبس خالت كحیح یؼتی اص لای اؿبس ی بیذ شاش$یب ح# ث ػ
ث حب غشیضی اص ای لای اػت $تاؾ# ی تاذ اوثش خالت كحیح سا ث آػبی ثـشاػت.
تـخیق دذ. اب بی البت ثب ؼبئی اخ ی ؿی و دس آ ثـش یض ی تاذ تـخیق دذ و
سخ دذ و دس ای دسػت اػت یب بدسػت. اجت چی حبتی ی تاذ ثشای یه ش افضاس خ یه
كست ش افضاس ثدبی پیغب خب، ثب یه پیغب ـذاسدذ تكیفی وبسثش سا آب ی ػبصد. ی تا اص
پیغب بی ـذاس دذ ثشای اكالح خببی ػجىی دػتسی یض اػتفبد د. اجت ای اش دس كستی
ای ثشای ػیؼت ؿبخت ؿذ ثبؿذ و ثتاذ آ اىب پزیش اػت و لب دػتسی صثب سدش ث
لای سا ثب خالت كحیح بثمت داد پیـبد بػجی سا ث وبس اسائ دذ.
(Tokenizationشا گذاری )
دس یه خ، ش و، ذد یب الت یه ـب ث حؼبة ی ایذ. ـب ذزاسی یذه ذب ذ لجذ اص
ذی تاذذ ثذ can'tسا بی صیبدی ثشای ـب زاسی خد داسد. ثشای ثب، وذ ثشچؼت زاسی اػت.
تجذی ؿد ث كست د ـب تفؼذیش ؿذد. Can not# ث حؼبة آیذ یب ث Tokenا یه ـب $
سی ـب زاسی یی تمؼی وشد ت ث ثخـبی بداس ث وذ، الذت ... . فشایذذ ـذب ذزا
كست ی یشد. ـى اكی ـب زاسی، تـخیق خ شصبی و اػت. Tokenizerتػي یه
وبسوتشبیی ث . ؟ ! ی تاذ ـب بی شص خ دس یه صثب ثبؿذ ی ای ـذب ذب ذی تاذذ دس
ا دس ػیؼذت خذبی دذی. اختلبسات یض دیذ ؿذ. ثشای ح ای ـى، ثبیذ یؼت وبی اص اختلبسات س
اذش 'to kick the bucket"شص ثی وبت ال تػي فوببی خبی ـخق ی ؿد اب دس جبست
فوببی خبی سا ث ا شص ثی وبت دس ش ثیشی، چبس و دذضا داسیذ وذ ایذ وذبس دس حذص
جبست سا ث ا یه ثشچؼت یی فذ ثذ ثشچؼت زاسی ب سا ثب ـى اخ ی ػبصد. چ ثبیذای
حؼبة آسی ث ا چبس و دضا ثب چبس ثشچؼت ختف.
8
( Part of Speech Tagging $گذاری اجشای کالم تزچسة
# دس یه خ اػت و دس Chuncksثشچؼت زاسی اخضای ػخ، فشآیذی دس تیذ چبه ب $
خد دس ت ث ثشچؼت تبش آ ؼجت داد ؿذ ش و الت یه آ ش خضء وال خبف
حی ی یشد. ی تا یه د ـخق لی اص ثشچؼت بی اخضای وال سا –كشفی ثشچؼت
تشیف د اب دس ای یب ی تا ث سایح تشی آ ب اص خ اػ، ف، حشف تشیف، كفت لیذ
د. اػ ب ث د ش فشد خ تمؼی ی ؿذ افب یض اص ش صبی ث زؿت، حب ... . اؿبس
شچ تذاد ثشچؼت ب ثیـتش ثبؿذ، وبس ػیؼت دس تـخیق ثشچؼت دسػت ثشای یه غت دس یه لیت
بكی یبص داسد دؿاستش ی ؿد چشا و ش ثشچؼت ث اسیت خ ،ثیظ دس شاحی اسیت ب،خبف
چی ثؼیبسی اص غبت ثب تخ ث ثبفت ی تاذ ثشچؼت بی تفبتی داؿت ثبؿذ. دس ایؼی غبت
"book"ثؼیبسی خد داسذ و ث ا اػ وبسثشد داسذ ث ا ف. ث ا ثب
بذ ی تاذ وبسثشد فی داؿت ثبؿذثبؿذ "ةوتب"ی تاذ دس خبیب اػی لشاس شفت ث بی
. "سصس وشد"
اص تبی غبت ؼجت ث ثش چؼجی و ی یشذ، ج ث حؼبة ی آیذ. اب 5/11 تب دس حذد "
اص غبت خد دس ش ت ج ؼتذ. ثبثشای 00اغت ث دی پش وبسثشد ثد ای غبت، ال "
زاسی اخضای وال ثبث اثب صدایی ی ؿد اص ای حیث حبئض ایت اػت. تب ثشچؼت بی ثشچؼت
ى ش غت ـخق اػت اب تب ی ثبیؼت یه ثشچؼت بػت سا ثشای ش غت دس یه ثبفت خبف
11"اتخبة د. ثب اتخبة پشثؼبذ تشی ثشچؼت و ث یه غت خبف اختلبف داد ی ؿد، ی تا
داد. ثشچؼت زاسی بیی و اص غبت سا اجت ثذ دس ش شفت ثبفت، ث ثشچؼت بػت خد ؼجت
15 - 19ثشاػبع تدضی تحی آبسی دس یه پیىش ثضسي كست ی یشد ی تاذ اص كحت " ذتب
یؾ اص یه ثشچؼت سا ث یه ب ؼئ اثب سا دس ش ی یشذ ث خسداس ثبؿذ. ثوی اص ثشچؼت زاسثش
بی ثشـتی، ی دذ و دس ای حبت ؿبغ ایى حذال یىی اص ثشچؼت غت دس ثبفت اختلبف
# دس ػیؼت تبیض لبئ recallث جبست دیش ثبیذ ثی د م دلت پؿؾ $ كحیح ثبؿذ ثیـتش اػت.
ؿذ.
9
ای اص یه ثشچؼت زاس لبذ ذ حن اػت # Constraint Grammarسیىشد دػتس حذد $
دلت داسد. دس ای سیىشد، تب ثشچؼت بی ى یه غت و اص دیىـشی 11و ادب ی وذ ثیؾ اص "
ػیؼت اػتخشاج ؿذ اػت، ث آ غت ؼجت داد ی ؿد تب ثشچؼت بیی و دش ث ایدبد دجب
ثب اػتفبد اص یه ػشی لای خبف حزف ی ؿذ. تبی ای ای اص ثشچؼت بی غیشدبص ی ؿذ،
لای دػت یغ ثد اص ای س پیبد ػبصی آ ثؼیبس صب ثش دؿاس ی ثبؿذ. اب تید حبك اص ای
اػت. اص آدب و ؿت ای لای ث كست دػتی دؿاس اػت ثبثشای 11سذ داسای كحت دلت "
ثذی و ػیؼت اص شیك ت ،وبس آب تػي ػیؼت ثیـتش سد تخ لشاس ی یشدیبدیشی خد
ی ثیذ ی تاذ دس ش سد لب خبف سد ش سا تجیك دذ. آصؽ
دس ای یب ی تا ث ثشچؼت زاسی بی احتبی یض اؿبس د و ضیت ثیـتشی ؼجت ث ثشچؼت
ذ داسذ. ای ثشچؼت ب ث صثب اثؼت یؼتذ دس ای حبت یبصی ث اسد وشد زاسی بی لبذ
وذبی ش لب ث كست دػتی ی ثبؿذ. ثشچؼت زاسی اكالحبت جبسات اص ـىالت سایح دس ای
سا ث دس اوثش اسد ثبیذ ثشچؼت اػ New Yorkثشب ب اػت. ث س ثب دس ثشچؼت زاسی جبست
دس ثیـتش اسد ی تا ثشای ثششف د ای ـى سا بست ؼجت داد ثشچؼت كفت & اػ. ای ج
حی اسائ د ثذی ی و ثشچؼت زاس اص شیك پیىش ای و داسای ـب زاسی بػت ثشای ش
ذ. ث س وی، سیىشدبی ی یشد و چ ثشچؼت زاسی كحیح جبسات سا ادب د جبست اػت یبد
ثؼیبسی خت خدوبس د ثشچؼت زاسی اخضای وال خد داسد دس ای سؽ ب ث دجب
افضایؾ ػشت دلت ثشب یض ی ثبؿی.
اخت الگای جول تزاساس چاک اس
د ث چبه بیی تدضی ی ؿد. چبه ػبصی فشآیذی اػت و ی آ یه خ ثش اػبع ػبختبس خ
ثشچؼت بی اخضای وال و دس وبس یىذیش لشاس داسذ # یه احذ تی اػت و اص تذادی اصچبه$تى
تـىی ی ؿد ساثي داخی ثی آ وبت سا ـب ی دذ. ثشای تجذی یه خ سدی، ث س
11
ست دػتی ی یؼی. ای لای ـب ی دذ و ثب ایؼی، ث ػبختبس چبه، لای سا ث ك
چ چبه ب دس وبس یىذیش لشاس شفت ػبص بی ش خ سا تـىی ی دذ. ث س وی دس
فشآیذ چبه ػبصی، خالت تمی ی ؿذ.
چاک ساسی ساس ا
بذ ذ اػت. چبه ػبصی ػبص ذب دػتسی، ل ػبصی ػبص ب دس غي یشی پیبد ػبصی فشآیذ چبه
ؿب د ثخؾ اػت: ثشچؼت زاسی اخضای وال تدضی تحیذ وبذ دػذتسی. دس ثشچؼذت ذزاسی
#، ػبختبسی parsingاخضای وال تب ػح و ثشسػی ی ؿد دس حبیى دس تدضی تحی دػتسی $
ب چبه ػبصی دسختی خالت ایدبد ی ؿد دس دجبذ ای اص وذبت دس ػبص ب، ذش ثشچؼذت ثذ
خ ؼجت داد ی ؿد.
ذی ؿذذ. ػذبص ذبی اص خ چبه بی ی حؼذة # VP # فی $ NP ػبص بی اػی$
افب ی تا ث د ش اػی ال ؿب حشف تشیف، كفبت، اػ هیش اػت. ػبص بی فی سا
the small , boy boyفب وىی ث اهبف لذس تمؼی د. ث ذس ثذب، ػذبص ذبی ا فشد
the the small blond boy ای اص ػبص بی اػی ؼتذ. ثذی الی بحذد ثد كفبت
دس ایدذب ی تا ػبص بی اػی سا ث حب شی ثذ یچ حذدیتی افضایؾ داد. شچذ آچذ
ػبص اػی بیذ ی ؿد تب یه ثب اػت تب بذ ثشچؼت زاسی اخضای وال، ش وؼی ی تاذ
یه چبه ػبخت ث آ اػ ی ثذذ. چبىش ؼئ یبفت چبه ب دس خ اػت اب اضاذب یذبصی
ی فی ثبؿذ $و ال دس خالت اص ػبص بی اػییؼت و چبه یبفت ؿذ دس و ت تب
آیذ# اجت پیذایؾ چی حبتی یض غیشى اػت. ب و ثشچؼت زاسی اخضای وذال دس ػذح
خذضای وذال آ ثشچؼذت ذزاسی وبت كست ی یشد، چبه ػبصی یض سی تی اب ی ؿد و ا
ست دػتی ؿت و ث ذب ثیذذ وذذا دجبذ ثذش چؼذجی . دس ایدب یب ی تا لای سا ث كؿذ اػت
اخضای وال وذا چبه سا ی ػبصد یب ایى ی تا چی ثشچؼت زاسی چبه ػبصی اخضای وال
دس یه ت سا ث چبىشی و ثشاػبع سؽ بی احتبی ی وذ، آصؽ داد. ایذ سؽ ذب سا ذی
ث ای و لای اص داؾ چبىشبی احتبی ثشخذسداس ؿذذ. دس فشآیذذ تا ثب یىذیش تشویت د
11
چبه ػبصی ث تی یبص داسی و اخضای وال دس آ ثشچؼت زاسی ؿذ ثبؿذ، ثبثشای دلت چبىش ی
ی اػتفبد تاذ ثتش اص دلت ثشچؼت زاس اخضای وال ثبؿذ صیشا حتی اش اص ثتشی چبىش یض دس چبه ػبص
اػت ای دس حبی اػت و ثش چؼت زاس ی ی تاذ دلت 10وی ثبص دلت پؿؾ آ تب "
پؿؾ ثبالتشی داؿت ثبؿذ.
(n-grams) دثال شا ا
ـذب دذذ تذذاد nب، دجب ای اص ـب بی دبس دس یذه خذ ؼذتذ وذ n-gramال
اػذت. ـذب ای# 3$دجبذ trigramیذه "modern houses are"ـب ب اػت. ثشای ثب جذبست
trigram#یذض یذه very secure$. دجب ای اص ـب ب ی تاذ ؿب البت، اذاد یب وبت ثبؿذذ.
ب nاد... اذ, خ ؿب الت ب ـب Kاػت و gram k-(n-1) اػت. یه خ ؿب
بی سدش اػت. n-gramذدخددس
ی تا ـخق وشد: ػ ـب یب "modern houses are"سا دس جبست n-gramاص د تبیض
adjective, noun, verb .ػ ثشچؼت :
ا n-gramریکزدی تز پای
یب grams-3بسی ثش اػبع فشهی ای اػت و دس آ كحت خالت اص احتبالت شثى ث ای سیىشد آ
2-grams 2احتب ،اصصیش ثب حبك ی ؿد. دس-grams :اػتفبد ؿذ اػت
پغ احتذب ػذ ػذت ب ا grams-2ای شح حبػج احتب تبی "He is playing"دس خ
ؿد حبك، احتب كحیح ثد و خ سا ـب ی دذ.تبی آب دس هشة ی
P (He is paying) = P ( | <start>)* p (is | He) * p (playing | is)* p (. | playing)
احتب ایى ای خفت ب دس یه پیىش چذ ثبس یبفت ؿذ ث كست:
12
تعذادایي جفت ادر پیکز
تعذاد کل جفت ای هجددرپیکز
ه اش اص یه یبس ثضستش ؿد خ كحیح اػت. ای سؽ ثب ی Pشدد ػپغ حبك یی حبػج ی
اػت ای اش ث ت 0ؿد، احتب خد و خ 0ذاد یه خفت ـى سثشػت و اش احتب سخ
سخ دذ.داؿت یه پیىش آصؿی وچه ى اػت ث ساحتی
تا ث خبی دس ش شفت وبت دبس اص ثشچؼت ذبی دذبس تذبش ثذب ثشای سا ح ای ـى ی
وبت اػتفبد د.
اجشای ساسذ یک تزاه غلط گیز دستری
یذ اكی دس ای یه پبیب داد ی ؿد . د فشآؿب سدی ، پشداصذ ، خشخی ، دػتسییه غي
ی ثبؿذ . training mode checking modeثشب
ایذذ فشآیذذذ ، سدی. آذذصؽ اص شیذذك داد ذذبی آذذبسی كذذست ذذی یذذشد Training modeدس
ذب دس ثخذؾ پبیذب داد ؽ ذسد ثشسػذی لذشاس ذی یذشد یه ت آبسی اػت وذ دس ثخذؾ پذشداص
ذب یذبفت غذي یذض سدی یذه ذت اػذت وذ ثذ ذس checking modeدس رخیش ذی ؿذد .
دس ذش د فشایذذ پبساتشذبی سدی ثبیذذ خذبف ثبؿذذ ذثال یذه ثشسػذی ذی ؿذد. خؾ پشداصؽدس ث
. داؿت ثبؿذ صثب یب یه سؽ ثشچؼت زاسی خبف
. ، داد بی آبسی ث كست ت دس پبیب داد ث ا سدی رخیش ی ؿذ training modeدس
یه خ یب حتی یه ت ث ا سدی خت یبفت غي بی شاشی دس ش checking modeدس
تب ث كست دجب ای اص پیب اػت و دس پبیب داد یبداؿت training modeخشخی شفت ؿد .
چشا و تید غي یشی اص ایت ثیـتشی ثشخسداس اػت checking modeد اب خشخی ی ؿ
حد .ذی ثبؿ training modeتشی سدی دس فشآیذ داد بی ابسی .اسائ ی بیذ سا دػتسی
اػتبذاسدبی خبكی ثشخسداس د اب ثبیذ اصث ا سدی ث وبس شفت ؿ ذ ختف ی تاصیبدی اص ت
ت ثبیذ اص ش شاشی وبال كحیح ثبؿذ . .ذثبؿ
13
غلط گیزی دستری
دػتسی یبصذ یه ػشی اص فشآیذب اػت و دس ری ثذا اؿبس ی ؿد: یه غي یشػبخت
دس ػح چبه غي یبثی آبثشسػی ابی خ -
تدضی تحی خببی چبىی -
تلحیح خبب -
جك تبیح ثذػت آذ ،ای غي یش ب ی تاذ اا خالت ػبد، شوت پیچیذ سا دس خالت
اص ایش ػ سؽ اكی ثشای پیبد ػبصی یه غي یش دػتسی خد ذ.دشی پشػـی تـخیق خج
:داسد
یی خالت تدضی ؿذ تدضی وب ت كست ی یشد دس ای سیىشد، :گزاغلط یاتی ح -
ش خ ث ػبختبس دسختی خد ؼجت داد ی ؿد تب اص ای شیك ثتا كحت دػتسی آ
دس كستی و تدضی فمیت آیض جبؿذ ت سد ش بدسػت خ سا ثشسػی د.
حؼة ی ؿد.
$ثشچؼت یه پیىش و اخضای وال آ ـخق ؿذ اػت دس ای سیىشد، :گزاغلط یاتی آهار -
یشد و زاسی# ثشای ایدبد فشػتی اص دجب بی ثش چؼجی اخضای وال سد اػتفبد لشاس ی
یض احتب سخذاد ش یه اص ای دجب ب ثشسػی ی ؿد. دس كستی و ت دس آ ثؼبذ
ثؼبذ آب پبیی تش اص آػتب ثبؿذ، و ثشچؼت زاسی ؿذ ؿب دجب ای اص اخضای والی ثبؿذ
$ثال حشف ذآ ت بدسػت دس ش شفت ی ؿد. ثوی اص ای دجب ب ثؼیبس تذا ؼت
دس حبیى ثوی اص دجب ب ى اػت اكال دس پیىش # The old manتشیف،كفت،اػ دسػبص
#. دجب بیی و the the old $ث س ثب حشف تشیف،حشف تشیف،كفت دسػبص بش ـد
سا دسػت دس ش اغت دس پیىش خد داسذ سا ی تا تی داد دس ت بیی دیش یض آ ب
هشستب لای شادجب بی بتذا ی تاذ ث ا خب حؼة ؿذ. سیىشد آبس شفت.
ثذی ی و اثتذا ث ػشا ،سا اص شیك یه پیىش آصؿی ثشچؼت زاسی ؿذ یبد ی یشد
14
جت داد ؿذ اػت ی سد ثشسػی ی وذ و چ ش و ث ثشچؼت خد ؼ صثبی پیىش
ذ لای سا ث كست خدوبس اػتخشاج د دس ی تب پیىش ثشچؼت ب ی تاپغ اص ثشسػ
ت ث وبس یشد.
و ثب یه ت سثش ؼتی د ای اص لای ثب دس ای سیىشد غلط یاتی قاعذ هذ: -
اػت ثب ای تفبت شاثشچؼت زاسی ؿذ تبػت داسد. ای سیىشد ـبث سیىشد غي یبثی آبس
.و لب بی آ سا ثبیذ ث كست دػتی ؿت
خطاای دستری
لای دػتسی ثؼیبس ؼتشد ی ثبؿذ حتی ثشای یه صثب ؼجتب ػبد ث ایؼی یض لای
تكیف ی ؿذ ش چذ و ؼتشدی چذای ذاسذ. لای دػتسی و دس صیش ثیب ی ؿذ دػتسی
ثش پبی خالتی اص پیىش صثبی ؼتذ و اص ای لب تخی ی وذ:
ؿبس ثب یىذیش بثمت دس صثب ایؼی، ف فب ثبیذ دس د م ـخق هطاتقت فعل فاعل: -
. ثب تخ ث دیذب سیىشد غي یبثی لبذ ذ و ت سا ث ا دجب ای اص ـب بی ذداؿت ثبؿ
ی تا ث اسد خبكی اؿبس د و دس آب تبثك ف ثشچؼت زاسی ؿذ اخضای وال تفؼیش ی وذ
فب اص ش ؿخلی ؿبس كست ی یشد:
یی ای و ف ثالفبك پغ اص فب لشاس ی یشد ث حب :جذایی فعل فاعل اس یکذیگز -1
: ؿخق ؿبس ثب اػی و لج اص آ ی آیذ بثمت ی وذ
The boys from Brookline school believes in God.
بی دس وبس یىذیش لشاس ی یشذ فب شوت یی د اػ ث كست پ :هزکة تدى فاعل - 2
:سا تـىی ی دذ دس حبیى ف آ ب ث كست فشد ی آیذ
Christie and Prin is characters from Laurence’s The Diviners.
15
دس ای حبت ف ث كست خ ی آیذ تب ثب تخ ث ثب صیش ثب هفزد تدى عایي کتاب: -3
خ خد دس ا و پغ اص آ ی آیذ بثمت داؿت ثبؿذ: اػ
Salman Rushdie’s Midnight’s Children are my favourite novel.
سد ش ب ثب حشف ودس كستی و ک ت دثال آى هی آیذ: کلو ایهطاتقت حزف کز تا -
ش افضاس ثب تخ ث حشف ا ش غت اػتفبد ی ؿد.an اص a كذاداس ؿش ؿد ث خبی حشف تشیف
سا دس ا غت داؿت a،e ، i ، o ، u ی تاذ چی تف آ سا حذع ثضذ یی اش یىی اص حشف
دس ش ی یشد و احتبال ثب حشف كذا داس ؿش ؿذ اػت. اب و ایػیؼت آ سا ث ا ثبؿی،
و دس ای حبت ثبیذ ػیؼت ، a university, an hourاػتثبئبتی یض دس ای صی خد داسد ث:
ثتاذ دس اسد خبف ث وبسثش پیـبد دسػتی ثذذ. تب تحت آصؽ لشاس یشد
شػؾ ب اغت دس صثب فتبسی وبسثشد داسد و دس آ یذ ی خاذ ای پ پزسش ای تاییذی: -
فت خد سا تبئیذ بیذ دس كستی و ف دس لؼت ا فی ثبؿذ كست غیش فی آ دس لؼت د
دس حبیى ػیؼت ی تاذ تبثك افب سا اص ش فی ثجت ثد خ بش ی ؿد ثبىغ.
ذ.تـخیق د
خببی دیشی یض خد داسذ و ث ا خببی دػتسی فی حؼة ی ؿذ خطاای دیگز: -
اغت ای خبب دس اثش یشایؾ ت حبك ی ؿذ یی اص شیك اؿتجببت تبیپی ایدبد ی ؿذ.
ی سا حزف وذ غتی سا خبیضی غت دیش بیذ اب فشاؽ ی وذ و غت پیـ ی خاذوبسثش
ثبىغ.
Me sussested saiel then he had an appointment with his boss.
چی غبجب وبت ـبث ث اؿتجب خبیضی یىذیش ی ؿذ و ای حبت یب بؿی اص ذ آبی
دس then thanثال د و .وبسثش اص و بػت اػت یب ایى دس اثش اؿتجب تبیپی سخ ی دذ
ثؼیبسی اص اسد ث خبی یىذیش ث اؿتجب ث وبس ی سذ.
تشخیص هزس جول
16
ی تا چی اػتذال د و دس تـخیق شص خ ث حب دػتسی ث خد خالت اؿبس ی وذ.
خ صیش خبی دػتسی خد داسد: د
Peter Leaves his house .She feels well.
بثمتی خد ذاسد. دس حبیى ب چی she هیش ؿخلی peter فصیشا دس ای د خ ثی اػ خب
اسدی سا ث ا خبی دػتسی دس ش ی یشی تب آ سا یه خبی بیی ث حؼبة ی آسی
داصی. ش فشدی ث س غشیضی ی تاذ آغبص پبیب خ سا تـخیق دذ. دس تب ث ف خ ی پش
حبی و ای وبس ثشای وبپیتش آػب یؼت صیشا دس ش شفت سؿت ای و دس اتبی آ م خد داسد،
یش ث ا خ، ثشای تـخیق خ وبفی یؼت.ثال اش دس خ ای حشف اختلبسی یب م ل غ
ثبثشای ثب ـى اخ ث دسػتی شص خ سا تـخیق دذ ػیؼت ی تاذ ؼتمی داؿت ثبؿی،
م سا ث ا شص خ دس ش 15.05 ؿد چشاو ث س ثب دس خلف اذاد اـبسی ثال ی
ثشای تـخیق شص خ اسائ سیىشدبیی سا یه خ ث حؼبة آسد. 15ی یشد دس حبی و ی تا
تشخ خدوبس ثد و یبصذ تـخیق شص خ دس یؿذ اػت و دس آ ذف اكی تخ ػیؼت ب
سدی ی ثبؿذ.
تشخیص دذ الگی جوالتگزاهز ای هستقل اس هتي ت عاى گزاهز ای
ی دذ و وبسثشدبی ؼتشد ای دس شاش بی ؼتم اص ت جم ی اص شاش ب سا تـىی
صثب بی ثشب یؼی، ثیافسبتیه ... داسذ. ای شاش ب ؿب ،صی پشداصؽ صثب جیی
و خی اص ػت ساػت ؼتذ یی دس ػت ساػت بدبی غیش ی ثبؿذد ای اص لای
د و ش شاش ؼتم اص ت ؿب د بد اػت: تشیب لشاس ی یشذ. دس ایدب ثبیذ اؿبس
تشیب: افجبی سد یبص و ثب حشف وچه ؿت ی ؿد. -
غیش تشیب: یه ػشی بد اػ ای ؼتذ فمي ث تكیف صثب سد ش وه ی وذ ثب -
حشف ثضسي ؿت ؿذ.
17
اوثش ػبختبسب سا دس صثب جیی تكیف بیذ. چی ی تاذ ؼتم اص تلای شاش بی
ی تا ثب اػتفبد اص ای ال ثش ای .ی تا اص ای شاش ب ثشای تـخیق ابی خ اػتفبد د
شاشب، ت سا ث اا چبه بی تبش ثب احذبی حی تمی د.
یش تـىی ؿذ اػت:یه شاش ؼتم اص ت اص د ص
G = [ V, T, S, P]
د تبی اص بدبی Tد تبی اص تغیش ب یب بدبی غیش پبیبی اػت Vو دس آ
Vبد ؿش اػت وی اص Sفل ؼتذ. V Tپبیبی ی ثبؿذ. فشم ی یشی و د د
لای شاشی سا ؿب ی ؿد: ، د ای اصPی ثبؿذ. د تبی
P ⊆ V (V ∪ T $%اص تیذات
شاش بی ؼتم اص ت ی تاذ ساثي پیچیذ یب وبت سا دس یه خ ثیب وذ. ای
ثشای شاشب لبث وتش ؼتذ ی تا آب سا ثب اػتفبد اص ا سیت بی تدضی ش پشداصؽ د.
پیبد ػبصی غي یشبی دػتسی و دس پشداصؽ صثب جیی وبسثشد داسذ ث یه ذ تدضی ش اختیبسی
ػبختبس ،#، فشآیذ تحی ثشسػی خدوبس ت اػت و جك دػتس ش صثبParsingیبص داسی. تدضی$
خالت صثب جیی حی بػت سا ث خالت ت ؼجت ی دذ. ثشای دسن ػبختبس حی بیی
و حذد ث دػتس اػت، اص تدضی ش اػتفبد ی ؿد.
تدضی ثبال . تدضی ثبال ث پبیی تدضی پبیی ث ثبال د سؽ ثشای تدضی خالت یه ت خد داسد:
ػت تیذات # آغبص ی ؿد ػی ی وذ بكش لشاسشفت دس ػت ساS$ ث پبیی $ثبال س# ثب بد ؿش
تدضی پبیی ث ثبال $پبیی س# ثب یه ایدبد بیذ.سا خ سدی بكش غیش پبیبی خبیضی د سا ثب
خ سدی آغبص ی ؿد غبت سا ثب چبه بی ػح ثبالتش تشویت ی وذ تب صبی و احذ ثذػت
ثب جم ثضستشی اص شاش ب ػشوبس داسد. تدضی ش ثبال س آذ ػشادب ث یه خ تجذی ؿد.
ای هستقل اس هتيتجشی چاک ا تا استفاد اس گزاهز
18
دس فشآیذ تدضی ػحی یب چبه ػبصی، یه خ ث دجب ای اص ػبص بی حی یب چبه ب تمؼی
ی ؿد، یی دجب ای اص غبت دبس و ثشاػبع یظی بی صثبی، یه ش سا تـىی ی دذ.
ثشسػی ػبختبس حی چبه ب دس یه خ ثشای تـخیق كحت دػتسی یه خ الص اػت.
ث س ثب ی تا اا چبه ب سا ث كست صیش تكیف د:
NC Noun Chunk a young boy, the girls VC Verb Chunk is playing, goes, went AC Adjective Chunk more beautiful, younger, old RC Adverb Chunk usually, quickly PTC Particle Chunk up, down PPC Prepositional Chunk at, on, in, under COC Conjunction Chunk and, or, but QC Question Chunk Where, Who, When INFC Infinitive Chunk to TC Time Chunk tomorrow, yesterday
ایه، چبه ب سا دس یه خ ػبد ث كست صیش تكیف ی وی:
The students are playing football in the playground.
NC_VC_NC_PPC_NC_END (Chunk-based Sentence Pattern) NC_VC_NC_PPC_NC_[SENT] NC_VC_NC_PPC_[DT_NN][SENT] NC_VC_NC_[IN][DT][NN][SENT] NC_VC_[NN][IN][DT][NN][SENT] NC_ [VBP_VBG][NN][IN][DT][NN][SENT] [DT_NNS][VBP][VBG][NN][IN][DT][NN][SENT] The[DT]students[NNS]are[VBP]playing[VBG] football[NN]in[IN]the[DT]playground[NN].[SENT]
دس ایدب اص ابی خ چبه حس ثشای تـخیق ابی خ اػتفبد ی بئی. شچ ابی
خ آصؽ دیذ ثیـتش ثبؿذ ی تا خبب سا ثتش تـخیق داد.
( False friendsن شیي ای ادرست )
19
االق ی ؿد و كست ث خفت وبتی اص د صثب ختف " ـی ب ی بدسػت "اكالح
د ؿتبسی تفی یىؼبی داسذ اب بی ش وذا تفبت اػت اص آدبیی و ثشای یبد یشذ صثب
ثبثشای ث اؿتجب و سا سد اػتفبد لشاس ی دذ. ثؼیبس آؿب ث ش ی سػذ
آبی ی پشداصی: –فت وبت ایؼی دس ایدب ث روش چذ اص ای ـی بی بدسػت ثی خ
$become دس ایؼی بدwarden #.دس آبی اػتbecome – bekommen
$actual دس ایؼی بدtatschlich #.دس آبی اػتactual – aktuell
لبث تخ اػت و ػخیب صثب آبی و صثب ایؼی یبد ی یشذ چی ایؼی صثب بیی
و دس حب یبدیشی صثب آبی ؼتذ، صبی و ثب چی وبتی س ث س ی ؿذ، ثؼیبس شا
د. بس و ی دای و وذا و سا ثبیذ خبیضی دیشی ی شدذی ؿذ دچبس تشدیذ
صثب ب غبجب سیـ ـتشوی داسذ بی البت چی ـىالتی تب ثی د صثب سخ ی دذ. ث س
$فشاؼ# sensible / $آبی# یض $ ایؼی# sensibel /sensible ثب وبت $ ایؼی#
sensible دس حبیى ثی خفت وبت $آبی# ة ی ؿذ. اص خ ـی بی بدسػت حؼ
sensible / sensible فشاؼ# چی حبتی ثشلشاس یؼت صیشا ش د و دس ش د صثب بی یىؼبی$
داسذ.
سا " ـی بی بدسػت"لبذ ذ یض ی تا ث ساحتی ای ثشب بی غي یش دػتسی دس
ب پیـبد یه ی خبیضی ای ـى ثشای وبسثش ح ی ؿد. صبی و وبسثش ثب و یبفت. تب ث
اؿتجب اخ ؿذ تاؼت ثب پیـبد ػیؼت آ سا ح وذ ی تاذ ای لب خبف سا خبؽ وذ تب
خبؽ ـی بی بدسػت دیش تب صبی و دس حبی و دیش ثشای و سد ش ـذاس ذذ
ی دذ. ـذ چب ـذاس
ارسیاتی غلط گیز دستری در پیکز ستای
# و اص recall# پؿؾ $precisionػیؼت بی غي یش دػتسی سا ی تا ثب د یبس سایح دلت $
بی اػت $و 1 0شیك ثبصیبثی االبت ـخق ی ؿذ، اسصیبثی د. مذاس ای د یبس ثی
البت ث كست دسكذ ثیب ی ؿد# ث كست صیش تشیف ی ؿذ:
21
خببی الی یبفت ؿذ دس ت
خالت بدسػت ثشچؼت داس = دلت
یبس دلت تذاد خالتی سا و ػیؼت ث دسػتی تـخیق ی دذ، اسصیبثی ی وذ.
خببی الی یبفت ؿذ دس ت
و خببی خد دس ت پؿؾ=
یبس پؿؾ تذاد خببی یبفت ؿذ دس ت سا اسصیبثی ی وذ یی شچ تذاد خببی یبفت ؿذ
ثبؿذ. دس 1ثیـتش ثبؿذ، ش افضاس وب تش اػت. ؼب ػیؼتی وب اػت و دلت پؿؾ آ ثشاثش
ای وال ال ث ای ال ثی ای د یبس ی تبد ثشلشاس اػت. ثشب ثشچؼت زاسبی اخض
ؿت ی ؿد و ثتاذ ىشد لی داؿت ثبؿذ ش ثشچؼت سا ث دسػتی ث ش و ؼجت دذ. دس
حبی و دس ثشب غي یش دػتسی چی اضای خد ذاسد ى اػت غي یش تخ ثوی اص
یه ثشچؼت سا ثشای ش و ثششداذ. خبب ـد. دسم، ثشچؼت زاس ی تاذ ثیؾ اص
ثبثشای بی البت ثب دس اختیبس داؿت تػي تذاد ثشچؼت بی ش و ی تا دلت ثشب سا اسصیبثی
د. اص ای س پؿؾ یض احب دسػت ثد یىی اص ثشچؼت بی ثشـتی اػت. پغ ث ساحتی ی تا
د اجت ث ؿشی و تب ثشچؼت بی ى ش و سا ثششداذ ایدبد 1ثشچؼت زاس ثب پؿؾ یه
و دس ای حت ؼب ثذتشی دلت ى سا خای داؿت. ثشای شاحی اسصیبثی یه غي یش دػتسی
ث پیىش ای اص ت یشایؾ ـذ یبص داسی. تبی خبب $ثدض خببی االیی# ثبیذ دس ای پیىش ـب
سی ؿذ. ث دی خد ذاؿت چی پیىش ای تب ی تا اص د پیىش اػتفبد د: زا
یىی اص پیىش ب ثبیذ بسی اص خب ثبؿذ
اص ای پیىش ث س ثی ػبصی دلت اػتفبد ی ؿد. دس ای حبت دیش ػیؼت ثیؾ اص حذ پیغب
خب ی دذ.
خالتی اػت و خبی دػتسی داسذپیىش دیش تب ؿب
21
ثؼیبسی اص خبب سا ی تا دس آ ای پیىش خت ثی ػبصی پؿؾ سد اػتفبد لشاس ی یشد
یبفت. ثب ای خد، اسصیبثی مذاس بداس پؿؾ/دلت ی ثبیؼت دس یه پیىش احذ كست یشد صیشا دس
اذ ثد.غیش ای كست اسصیبثی ب غیشالی خ
تیج گیزی
یذ پشداصؽ صثب جیی حؼة ی ؿد و آثشب غي یش دػتسی ث ا یه ثخؾ جیی دس فش
ذف اكی آ پشداصؽ جبسات سصش اػت ال ثش خالت دػتسی خؽ ػبخت، خالت ثذ ػبخت سا
د ای اص یض ؿب ی ؿد. شاحی پیبد ػبصی غي یش بی دػتسی یبصذ دس اختیبس داؿت
ػتس صثب جیی ـبثت داسد. ال ثش ای، ثشسػی اكالح لای اوتـبفی $یسیؼتیه# اػت و ثب د
ابی خ دس ػح چبه خت تدضی تحی خببی چبىی تلحیح آ ب اص خ فشآیذبی
اا اكی دس شاحی پیبد ػبصی غي یش بی دػتسی اػت ثبثشای چی غي یشی ی تاذ
دس خالت خجشی پشػـی تـخیق دذ.یچیذ سا خالت ػبد، شوت پ
References A Rule-Based Style and Grammar Checker; Daniel Naber; Diplomarbeit Technische Fakul t; Universit t Bielefeld Datum: 28.08.2003;Betreuer: Prof. Dr.-Ing. Franz Kummert, Technische Fakult t; Dr. Andreas Witt, Fakult t für Linguistik und Literaturwissenschaft. Automating rule generation for grammar checkers; Marcin Miłkowski; Polish Academy of Sciences. Grammar Checking System Using Rule Based Morphological Process for an Indian Language; Lata Bopche; Gauri Dhopavkar; Manali Kshirsagar. Design and Implementation of a Morphology-based Spellchecker for Marathi, an Indian Language; Veena Dixit, Satish Dethe, Rushikesh K. Joshi. The Development and Performance of a Grammar Checker for Swedish: a Language Engineering Perspective; J. Carl berger, R. Dome i j, V. Kann, O. Knutsson. Developing a Chunk-based Grammar Checker for Translated English Sentences; Nay Yee Lin; Khin Mar Soe; and Ni Lar Thein. A Swedish Grammar Checker; Johan Carlberger Rickard Domeij Viggo Kann Ola Knutsson. Google Books N-gram Corpus used as a Grammar Checker; Rogelio Nazar Irene
22
Renau.
LISGrammarChecker: Language Independent Statistical Grammar Checking; Prof. Dr. Bettina HarriehausenMühlbauer; Hrafn Loftsson, Ph.D., Assistant
Professor
ضویو تحقیق
دس ای ثخؾ ث روش چذ اص ثشچؼت بی ثب سخذاد ثبال، لای دػتسی صثب فبسػی وذیؼی ؿذ
یض وذ یؼی ثشای تـخیق شص خ ی پشداصی:
تزچسة ای تا رخذاد تاال -
يتخثؾا -
ADJ_SIM_PAFF_6
پشذ -
N_SING_COM_GEN
گشداذ -
V_SUB_NCAU_3
ARؽاسب
ADJ_SIMيادسصاد
N_SING_COMضاسب
اؽاس ی
N_SING_COM_GEN
ژاپی االصم
تيسای
N_PL_COM_GEN
غایؼ
N_PL_COM_PAFF_3
ARیذخم
ADJ_SIMقثل
23
يغانیتی -
N_SING_COM_INYA
ع -
N_SING_COM_GEN
تیاكی -
V_SUB_POS_2
N_PL_COMيانا -
ADJ_SIMیى پخت -
دذا پضؽكی -
N_SING_COM
طش ای -
N_PL_COM_GEN
انؤثاأ -
N_SING_PR
يجػ اعت -
V_PRE_NC_3
تجغ -
N_SING_COM_GEN
جشػ -
N_SING_COM_GEN
ADJ_SIMچذعی -
N_SING_PRیكايی -
تؼذ -
N_SING_COM_GEN
تش ذاؽتیى -
V_PA_SIM_NEG_4
ي ج -
N_SING_COM
N_SING_PRاتؼ -
عايایم -
N_SING_PR
تسصذ -
V_SUB_POS_6
ػقة افتاد ای -
ADJ_SIM_INYA
يی یى -
V_PRS_POS_4
ؾا ی -
N_SING_COM_GEN
آیذ اذ -
V_PRE_NC_6
تی آالیؾی -
N_SING_COM
تاستشیای -
N_PL_COM_GEN
صادگا -
N_SING_LOC_GEN
دی يحسی -
N_SING_COM
- 458 212
N_SING_CN
پشسؽى -
N_SING_COM_PAFF
_1
عأ یت ا -
N_PL_COM
كاسیكی -
N_SING_PR
ADJ_SIM_GEN
N_SING_PRاسگ
PVC N_SING_LAT_GEN
N_SING_PRحاسب
N_SING_PRاعتیكف
ADJ_CMPRتتش
V_PRS_POS_1يی دى
ح عشایی
N_SING_COM
N_SING_GR_GENيجغ
V_SUB_POS_2افكی
N_SING_PRگشیفیت
N_SING_PRعیت نعت
N_SING_COMػادت
ADJ_SIMكی كؼ
irost N_SING_LAT
صسو
N_SING_COM_PAFF_1
N_SING_PRتیت
ضتایی
N_PL_COM_INYA
ADJ_SUPتذتشی
N_SING_COMدعتكاسی
N_SING_COMتسو
دختذ
V_PA_SIM_POS_6
N_PL_COMگاا
پیچیذ یی
ADJ_SIM_INYA
V_SUB_POS_1خسو
DELMدسو
OHیاسب
ADJ_SIMدل يشد
يی جؽیذ
V_PA_PRG_POS_3
ADJ_SIMعاح دیذ
اعیانیغى ای
N_PL_COM_GEN
تاص يی گیذ
V_PRS_POS_6
N_SING_PRػد
N_PL_GR_GENيشديا
N_PL_COMسؽا
عاصيا دذ
ADJ_SIM_GEN
ADJ_SUPيغتثذتشی
N_PL_COMجهثك ا
تحشای ای
ADJ_SIM_INYA
N_SING_COM_GENسد
N_SING_PRنتیفیف
N_SING_COMيضدكیت
N_SING_PRؽیخ االكثش
ADJ_SIMسیؼ سیؼ
ADJ_INOتد
N_SING_GR_GENتد
N_SING_COMصسگیی
كاس گزس
N_SING_LOC_GEN
N_SING_COM_GENدد
ػالق يذی
ADJ_SIMيض طهة
ADJ_SIMان اس
V_IMP_POSتگزاس
ADJ_SIM_GENآياتسی
دسج تذی ؽذ
ADJ_SIM
N_SING_PRاعپشغا
جاس ای
N_PL_COM_GEN
جاگؾاایای
N_PL_COM_GEN
N_SING_COMگشافشؽی
N_SING_COM_INYAدخهی
N_SING_PRؽیشصاد
N_SING_PRكتش
دسخت صاسا
N_PL_COM_GEN
كشی اػ
ADJ_SIM_PAFF_3
N_SING_PRسو
0393 N_SING_CN
ADJ_SIMخدكايا
ARاغاب االؽشاف
V_SUB_POS_5تپغذیذ
N_PL_COMكؾؼ ا
ADJ_SIMتا فتت
ADJ_SIMچؾى گشت ای
N_PL_COMپتا
كغانت آسی
ADJ_SIM_INYA
تشآسد كذث
ADJ_SIM_GEN
دسی گشدا
N_SING_COM
ADJ_SIMخػ ػهف
V_PA_SIM_POS_5كشدی
N_SING_LOC_PRعال
پاتق ایؾا
N_PL_COM_PAFF_6
دیذاساای
N_PL_COM_INYA
ADJ_CMPRیشيذتش
N_SING_PRیك پس
N_PL_COM_GENقذو ای
N_SING_COM_GENحشت
N_SING_PRعشساحذی
صیاؼ
N_SING_COM_PAFF_3
ح عشاای
N_SING_COM
N_SING_PRاتی جم
N_PL_COMػهكشدا
V_SUB_POS_5تسصیذ
ADJ_SIM_GENاساا گش
ARاجیاال
N_SING_COMػایقثذی
اذدتیك
N_SING_PR_GEN
N_SING_PRاایی
ADJ_SIMنیییت
N_SING_COMافغا گ
24
تیى ایی -
N_PL_COM_INYA
پشتاسی -
N_SING_LOC_PR
آغت آغت -
ADV_NI_NQ_SIM
فشعتاد ؽذ -
ADJ_SIM
يعیت -
N_SING_COM
ايكا اپزیش -
ADJ_SIM
جییى -
V_SUB_NEG_4
- 0231 N_SING_CN
- 1231 N_SING_CN
پشسدو -
V_PA_SIM_POS_1
- 5231 N_SING_CN
عانیكا -
N_SING_PR
تاصسعی -
N_SING_COM
افكى -
V_SUB_POS_1
يی گزساذیى -
V_PA_PRG_POS_4
كاؽا -
N_SING_LOC_GEN
يایت -
N_SING_COM_GEN
دتهی تی ا -
N_SING_NPR
اانیا -
N_SING_PR
جثاذ -
V_PA_SIM_POS_3
ADJ_SIMد سدیف
V_PRE_ADJC_6خطشاكذ
N_SING_PRيیشػاد
N_SING_PRتاتاصاد
تسط تاصا
N_PL_COM_GEN
چذقهای
N_PL_COM_GEN
N_SING_PRاعتی
ADJ_SIMغافم كذ
يی ؽشد
V_PA_PRG_POS_3
ARتالی
N_SING_LOC_PRگستذ
N_PL_COM_GENتؼشیزای
N_SING_COMاعتیك
N_SING_COMيحؾش
N_SING_COMاعتیم
N_PL_COMگؽانی ا
N_SING_PRاعتی
N_SING_LOC_PRاػ
ADJ_SIMععپاظ ؽذ
N_SING_COM_GEN
كس ذ
N_SING_LOC_PR
N_SING_COMجع
8797355 N_SING_CN
ADJ_SIMحسصاد
تخصص ای
N_PL_COM_GEN
تینژیكؾا
N_SING_COM_PAFF_6
تاص اسدؽذگا
N_PL_COM
N_SING_PRاگاسا
ARغذا
ADJ_SIMكیشی
N_SING_PRسط
اعكاتهذ
N_SING_LOC_PR
N_PL_COM_GENتخای
يإعغ ای
N_SING_COM_INYA
N_SING_COMنجغتیك
دتاس عاصی
N_SING_COM_GEN
ADV_NI_Q_SIMتذا
ػهی افضم آالف انتحی
N_SING_SURNانغالو
اتقاو جایای
N_PL_COM_GEN
دنثغت اذ
V_PRE_ADJC_6
ؽشكت كذ ای
N_PL_COM_INYA
N_SING_PRتغف
ژسف عاختی
N_SING_COM_INYA
تشیاؽتی
V_SUB_NEG_2
صد گا
ADJ_ORD_GEN
عشيی تشپی
N_SING_COM_GEN
ADJ_SIMتی تذل
N_PL_COM_GENيثذنای
غشنذی
N_SING_COM_INYA
یكؾث ؽا
N_SING_DAY_PAFF_6
ADJ_SIMتی تال
تاسی ییسعی
N_SING_PR
N_SING_COMاكتفاأ
N_SING_COMآتتی
ADJ_INOچاییذ
N_SING_PRعایفشت
1سصؽی ! !
ADV_NI_NQ_SIMيحصشا
N_PL_COMيافقا
تشاذثسگ
N_SING_LOC_PR
N_SING_PRخجای
دس ى سدیذ
ADJ_INO
ADJ_SIMپهتیيی
N_SING_COM_GENپیؼ
129560 N_SING_CN
ADJ_SUPیاصدی
ADJ_SIM_INYAيتثشكی
N_SING_PRيعی ژاد
1ذادؼ
2206637 N_SING_CN
زی نزی ADJ_SIM_INYA
N_SING_COM_GENيحصل
DELMصخاسی
N_SING_COMيقتن
N_PL_COMتاقضا
ADJ_SIM_GENایغتاگش
N_SING_PRػغقالی
ساپیاایای
N_PL_COM_GEN
دسغگی
N_SING_COM_GEN
N_SING_COMػشط
ADJ_SIMؽایهی
ADJ_SIMپشیؾا
ADJ_SIMتی جارت
N_SING_COMيشدعاالسی
گیا خاسی
N_SING_COM
N_SING_COMاتاو
N_PL_COM_GENيؾاذ
پپتیذ ای
N_PL_COM_GEN
ADJ_SIMتی پیكا
N_SING_PRتشط
N_SING_PRيیخی
آسؽیص آف دیضیض
N_SING_PR
N_SING_PRجشط
N_SING_COM_GENخشط
N_PL_COM_GENدسط
كاساغشای
N_SING_LOC_GEN
جایت پیؾ گا
N_PL_COM
یؾاتسؽاعی
N_SING_COM
ARػذانغهی
ADJ_CMPRآعد تش
یاصسد
V_PA_SIM_NEG_3
3395 N_SING_CN
ADJ_SIMيحصس
N_SING_PRچى پس
N_SING_PRجیظ دیفظ
ADJ_CMPRيتؼادل تش
ARايشا
ظشفیت عاصی ای
N_PL_COM_GEN
ا تكت
N_SING_LOC_PR
V_PRE_ADJCایاختی
25
N_PL_COMچاقی ا
صیادی اػ
N_SING_COM_PAFF_3
ADJ_SIMدی گشیض
اي ج N_SING_COM_GEN
تجذیذ ظشطهثی
N_SING_COM
N_SING_LOC_PRادعا
ADJ_SIMحایتی
N_SING_PRكشص
N_PL_COM_GENقانة
N_SING_COMپشپا
N_SING_PRگهیگسف
N_SING_PRاتحاتى
N_SING_LOC_PRتؼهثك
فشا يی خایذ
V_PRS_POS_5
N_SING_COMصذ تيای
خا ایا
N_PL_LOC_PAFF_4
ARخاصى
ياسییستیایك
N_SING_PR
N_PL_COM_GENػالاق
ADJ_PINOفش يی تشد
تاص ياذ
V_PA_SIM_POS_3
N_SING_PRيیشفالح
دعتای ای
N_SING_COM_INYA
V_IMP_POSتیشا
N_SING_PRا گا
فشدایؾا
N_SING_TIME_PAFF_6
ػطشعاصی
N_SING_COM_GEN
N_SING_COMپاای ت
انغتا
N_SING_LOC_PR_GEN
N_SING_PRتشاغف
خسد ای
V_PA_NAR_POS_2
-
خذیذیى
V_PA_SIM_POS_4
اثشػ
N_SING_COM_PAFF_3
N_SING_PRفیه قط
پیؾذ
N_SING_COM_GEN
ADJ_SIMغیشدسخاعتی
N_SING_PRآیت انی
س غط ADJ_SIM
استفاػی
N_SING_COM_INYA
N_PL_COMتیشحی ا
N_PL_COM_GENصخاسف
N_PL_COM_GENطشاحا
N_SING_PRكاجی یايا
يافقتاي يا
N_SING_COM_PAFF_4
2544 N_SING_CN
ؽؾیشتاص
N_SING_COM_GEN
ADJ_SIMقعی ؽكم
تال گشدای
N_PL_COM_GEN
N_SING_COMدتشجت
فی كذ
ADJ_SIM_GEN
N_PL_COMدسگا ا
ADJ_SIM_GENصجشدذ
N_SING_PRیپاسيش
N_PL_COMصاحثظشا
ADJ_SIMقثیه ای
فش افتاد
V_PA_SIM_POS_3
N_SING_TIMEیى قش
دعتای یی
N_SING_COM_INYA
N_SING_COMحجت خا
N_PL_COM_INYAدفاتشی
يطایث اي
N_SING_PR
N_SING_LOC_PRگشط
N_SING_COMیفذیپی
اتاو ایی
N_PL_COM_INYA
N_SING_COMككعثضی
N_SING_COM_GENتكشی
V_PRE_NC_6یاصذ
ADJ_SIMعفیذ پػ
دس اذاختذ
V_PA_SIM_POS_6
N_SING_COMتك ياد
N_PL_COMاتشاس
56565 N_SING_CN
N_PL_COM_GENچانؾای
11540 N_SING_CN
پیشايا
ADJ_SIM_PAFF_4
N_SING_PR_GENآ اط
تایهی
N_SING_COM_INYA
N_SING_PRآیضؾتی
ADJ_SIMپاداػ دذ
ADJ_SIMايیذتخؼ
جاسی اذ
V_PRE_ADJC_6
N_SING_COMاتشاو
تش گیشذگای
N_PL_COM_INYA
V_PRE_NC_6ؽتاسذ
ADJ_SIMفكسا
یدی اػ
ADJ_SIM_PAFF_3
N_SING_COMتی آتشای
ADJ_SIMتالفی جیا
دسآيذ
N_SING_NFL_GEN
N_SING_PRخغش
گشدؽگشپزیش
ADJ_SIM_GEN
چاسچب ای
N_PL_COM_GEN
ARؽاكشا
قشآ پژی
N_SING_COM
يؾؼم گ ای
ADJ_SIM_INYA
يغشب صيییا
N_PL_COM
ADJ_SIMدسكؼتی