تحلیل واژگانی: تفاوت میان نسخه‌ها
محتوای حذف‌شده محتوای افزوده‌شده
بدون خلاصۀ ویرایش |
بدون خلاصۀ ویرایش |
||
خط ۱۲۸:
به دنبال عمل توکن سازی parsing می آید. از آنجا ، داده ی تفسیر شده ممکن است، برای استفاده ی عمومی ، تفسیر ، یا ترجمه (کامپایل) در ساختمان داده هایی بارگذاری شود.
=== اسکنر ===
در مرحله اول، اسکنر، معمولاً مبتنی بر یک [[ماشین‌های حالات متناهی|ماشین حالت متناهی]] است که با استفاده از اطلاعات کاراکترهایی با توالی ممکن کدگذاری شده است که این کاراکترها می‌توانند هر یک از توکن‌ها مورد استفاده باشد. به عنوان مثال، یک توکن عدد صحیح می‌تواند دارای هر توالی از
{{رایانه-خرد}}
| |||