21/1/2010 Nhiệm vụ của bộ phân tích từ vựng „ Phát hiện các từ tố Bài 5 Bộ phân tích từ vựng „ Bỏ qua các ký tự không cần thiết Khoảng trống Dấu tab Ký tự xuống dòng (CR,LF) Chú thích 1 Từ tố có cấu trúc cú pháp 2 Xử lý các luật từ vựng trong bộ phân tích cú pháp ? „ Làm cho bộ phân tích cú pháp trở nên quá phức tạp Phân biệt tên và từ khoá Phải có những luật phức tạp để xử lý chuỗi các ký tự không cần thiết (khoảng trống, tab, chú thích . . . .) „ Tại sao không xử lý các luật này trong giai đoạn phân tích cú pháp ? 3 4 fb.com/groups/ 1 21/1/2010 Các từ tố của KPL „ „ „ „ „ „ „ Ôtômat hữu hạn của bộ PTTV Số nguyên Định danh Từ khóa: begin,end, if,then, while, do, call, const, var, procedure, program,type, function,of,integer,char,else,for, to,array Hằng ký tự Dấu phép toán: số học + - */ so sánh = != < > <= >= Dấu phân cách ( ) . : ; (. .) Dấu phép gán := Sau mỗi từ tố được nhận biết, bộ từ vựng lại quay lại trạng thái s0 5 Xử lý các loại từ tố Các phép toán quan hệ case 0 : c= nextchar(); if(c==blank || c= =tab || c= =newline ){ state = 0; lexeme_beginning++; //chuyển con trỏ đến đầu từ tố) } case 1: if(c= = '<') state = 1a; else if (c= = '=') state = 4; else if (c= = ‘!') state = 5; else if (c= = ‘>') state = 7; else state =fail();break; case 1a: c:=nextchar(); if (c= = '=') state = 2; Else state=3; case 2: return (leq) switch(state) { case 0 // Bỏ qua khoảng trống case 1// Xử lý các phép toán quan hệ case 10 // Xử lý tên case 13 // Xử lý số ... } 7 6 8 fb.com/groups/ 2 21/1/2010 Số nguyên Định danh case 13: c = nextchar(); if(isdigit(c)) state = 14; case 14: c=nextchar(); if(isdigit(c)) state = 14; else state = 15; break; case 15 : retract(1); install_num(); return(num); case 10: c = nextchar(); if(isletter(c)) state =11; else state = fail; break; case 11: c = nextchar(); if(isletter(c)) state =11; else if (isdigit(c)) state = 11; else state = 12; break; case 12: retract(1) ; install_id(); return

… Tải file gốc để đọc toàn bộ tài liệu.