Tokenek
A Nemerle nyelv lexikális elemek (token) és üres karakterek (blank) sorozatából épül fel. Az üres karakterek nincsenek figyelembevéve a nyelv értelmezésekor, elválasztó szerepet töltenek be.
A tokenek osztályai:
- azonosítók
- literálok
- kulcsszavak
- üres karakterek (blank)
- preprocesszor direktívák
Üres karakterek
Szóközök, tabulátorok, lapvége és sorvége karakterek, valamint a kommentek összességét nevezzük üres(blank) karaktereknek. A C#-hoz hasonlóan a Nemerlében is két fajta komment létezik: "hagyományos" és egysoros, a hagyományos komment /* -gal kezdődik és */ -rel zárul, az egysoros //-rel kezdődik, és sor vége karakterrel zárul.
Preprocesszor direktívák
A Nemerle preprocesszor díráktívái megegyeznek a C# preprocessor direktíváival.
- #define
- #undef
- #if
- #elif
- #else
- #endif
- #line
- #error
- #warning
- #region
- #endregion
- #pragma
Azonosítók
A szabályos azonosítók alfanumerikus karaktereket, aláhúzásokat és aposztrófokat tartalmazhatnak, de nem kezdődhetnek számmal. A @ karakter megszünteti az utána következő karakterlánc lexikai és szintaktikai értelmét, ezáltal megengedi a kulcsszavak azonosítóként való használatát.
Az aláhúzással kezdődő azonosítókkal jelölt lokális változók esetén a fordító nem szól, ha az adott változót nem használjuk.
A következő karaktereket szimbolikus azonosítóknak nevezzük: =, <, >, @, ^, |, &, +, -, *, /, $, %, !, ?, ~, ., :, #. A szimbolikus azonosítókat a fordító infix operátorokként kezeli.
Kulcsszavak
A következő szavak kulcsszavak a nyelvben, és semmilyen körülmények között nem használhatók azonosítóként (kivéve, ha @ jellel levédjük őket): _, abstract, and, array, as, base, catch, class, def, delegate, do, else, enum, event, extern, false, finally, for, foreach, fun, if, implements, in, interface, internal, lock, macro, match, module, mutable, namespace, new, null, out, override, params, private, protected, public, ref, sealed, static, struct, syntax, this, throw, true, try, type, typeof, unless, using, variant, virtual, void, when, where, while, assert, ignore. A következő infix azonosítók szintén foglalt kulcsszavak: =, $, ?, |, ->, =>, <[, ]>, &&, ||.
Literálok
Literálok típusai:
-
String literálok: "" jelek közé vannak írva. A \ (backslash) jelet a fordító escape szekvencernek értelmezi. Az $ operátort sztring helyettesítésre lehet használni, hasonlóan, mint PHP-ban.
def name="World!"; System.Console.WriteLine($"Hello $name"); - Nyers sztring literálok: hasonlóak, mint a hagyományos sztring literálok, kivéve, hogy @ jellel vannak védve. Ez esetben a fordító értelemezi a \ jeleket (escape szekvenciákat).
- Karakter literálok: '' jelek közé vannak írva. Az escape szekvenciákat kiértékeli a fordító.
- Numerikus literálok: Létezhetnek szuffixeik. A lehetséges suffixek: 'b', 'sb', 'ub', 's', 'us', 'u', 'l', 'lu'. A szuffixek nem nagybetűérzékenyek, és sorrendjük is tetszőleges lehet. A számjegyek elválasztására, csoportosítására az aláhúzás ( _ ) karaktert lehet használni.
-
Lebegőpontos számok: A lebegőpontos számoka következőképp vanank definiálva szintaktikailag:
<floating_point_literal> ::= [ <digits_> ] '.' <digits_> [ <exponent> ] [ <suffix> ] | <digits_> <exponent> [ <suffix> ] | <digits_> <suffix> <exponent> ::= <exponential_marker> [ <sign> ] <digits> <digits> ::= { <digit> } <digits_> ::= <digits> [ { '_' <digits> } ] <exponential_marker> ::= 'e' | 'E' <sign> ::= '+' | '-' <digit> ::= <decimal_digit> <suffix> ::= <floating_point_suffix> <floating_point_suffix> ::= 'f' | 'd' | 'm' - Egyéb literálok: true, false, null, ()