مدلسازي يا پردازش زباني
شنبه 9 بهمن 1389 11:35 PM
مدلسازي يا پردازش زباني
مرحله بعدي «مدلسازي زباني» يا «پردازش زباني» نام دارد. حروف به هم چسبيده، كه كلمه را درست ميكنند، بايد معنيدار يا شناختهشده باشند. در اين مرحله بررسي ميشود كه چه كلماتي در زبان وجود دارد؟ چه تركيبهايي از كلمات مجاز است؟ و... البته در مراحل پيشرفتهتر، مدلسازي گرامري (دستور زبان) و مدلسازي معنايي هم وجود دارد كه تشخيص ميدهد جمله از لحاظ دستوري و معنايي درست است يا بيمفهوم است. اما در OCR گسسته ــ كه بيشتر براي ثبتنام استفاده شده ــ شباهت يك كلمه به نام، نام خانوادگي، شهر و ... كافي است.
براي تشخيص تركيبهاي مجاز يك كلمه يا معنيدار بودن يك كلمه نيز به تهية بانكهاي اطلاعاتي (Data base) نياز داريم. در اين بانكها مثلاً تمام نامهاي كوچك و بزرگ ايرانيان قبلاً جمعآوري شده است و هنگام تطبيق يك كلمه با آن مشخص ميشود كه رايانه حروف آن را دست تشخيص داده يا نه. بنابراين نقش اين بانك اطلاعاتي بسيار مهم است، چون اگر نامي در آن ثبت نشده باشد، كلمهاي كه آن نام را شامل شود، به طور خودكار از برنامه OCR حذف ميشود يا پيغام ميآيد كه: «اين كلمه اشتباه است» در صورتي كه ممكن است مثلاً نام «هشام» در بين نامهاي ايراني وجود داشته باشد، ولي قبلاً در بانك اطلاعاتي ثبت نشده باشد.
