Sözcüksel çözümleyicinin eldeki dile ait yalnızca sonlu bir geçerli dize/belirteç/sözlük kümesini taraması ve tanımlaması gerekir. Dil kuralları tarafından tanımlanan kalıbı arar. Normal ifadeler, sonlu sembol dizileri için bir kalıp tanımlayarak sonlu dilleri ifade etme yeteneğine sahiptir.
Neden bir sözcük çözümleyicisine ihtiyacımız var?
Sözcüksel Çözümleyicinin Rolü
Derleyicinin ilk aşaması. Sözcüksel analiz: bir karakter girdi dizgisini (bir bilgisayar programının kaynak kodu gibi) alma ve bir ayrıştırıcı tarafından daha kolay işlenebilen sözcüksel belirteçler veya yalnızca belirteçler adı verilen bir sembol dizisi üretme süreci.
Derleyicide sözcük çözümleyicisinin rolü nedir?
Ayrıştırıcıdan bir sonraki tohen komutu aldığında, sözcük çözümleyici bir sonraki belirteci tanımlayana kadar giriş karakterlerini okur. belirteçler ayrıştırma kararlarını etkiler, … nitelikler belirteçlerin çevirisini etkiler.
Sözcüksel çözümleyici ne üretir?
Sözcüksel çözümleyici (lex gibi bir araç tarafından otomatik olarak oluşturulur veya el yapımıdır) bir karakter akışını okur, akıştaki sözlükleri tanımlar ve bunları simgeler halinde sınıflandırır. Buna tokenleştirme denir. Sözcük geçersiz bir belirteç bulursa bir hata bildirir.
Farklı aşamalarda sözcüksel Çözümleyici ve sözdizimi Çözümleyicisinin ihtiyacı nedir?
Sözcüksel çözümleyici bir kalıp eşleştiricidir. Sözdizimi analizi, programın sözdizimindeki deformasyonları belirlemek için bir ağaç oluşturmayı içerir. Sözcük analizi için genellikle daha az karmaşık yaklaşımlar kullanılır. Sözdizimi analizi çok daha karmaşık bir yaklaşım gerektirir.
