Aut-BLEU: سیستم ارزیابی ترجمه ی ماشینی با رویکردی نو در وزن دهی به N-gram ها بر اساس نقش کلمه در جمله

تاکنون سیستمهای بسیاری برای ارزیابی ترجمه ماشینی ارائه گردیده است. هدف اینگونه سیستمها نزدیک کردن ارزیابی خودکار به ارزیابی توسط انسان میباشد. در این مقاله پس از بررسی این روشها، نقاط ضعف و کمبودهای آنها مورد بررسی قرار گرفته است. از جمله کمبودهای روشهای مبتنی بر N-gram یکسان در نظر گرفتن اهمیت کلمات و N-gram ها می باشد در حالیکه از دیدگاه انسان هر کلمه اهمیت معنایی متفاوتی نسبت به بقیه ی کلمات دارد. در برخی از این روشها به N-gram ها وزن داده شده است ولی نحوه ی وزندهی تطابق کاملی با معیارهای انسان ندارد. از آنجا که اهمیت معنایی کلمات با توجه به نقش آنها در جمله متفاوت می باشد در روش Aut-BLEU جایگاه هر کلمه در درخت پارس پیدا شده و با توجه به این جایگاه به آن کلمه وزن متناسب به صورت ایستا اختصاص داده میشود.. پس ازوزندهی کلمات وزن N-gram های مربوطه از طریق محاسبه ی میانگین وزنهای کلمات آن N-gram پیدا می شود و بقیه ی ارزیابی همانند روش پایه ی BLEU انجام می پذیرد. پس از بررسی روش Aut-BLEU نمودار جریان داده ی سیستم ارائه و معماری آن بررسی می گردد.