ZX Spectrum tokenizer vlastně ani nemá, právě díky tomu že se tokeny zadávají přímo klávesnicí, podle toho který vkládací režim je právě nastavený. Ušetřilo se tak pár kilobajtů ROM a asi i hromada výkonu, díky tomu zbylo na takové lahůdky jako kontrola syntaktických chyb přímo v editačním řádku, a ne až za běhu.
Tokeny se v BASICu používají už od šedesátých let, jakmile se objevily první interpretry na minipočítačích. Prakticky je to částečná kompilace do jazyka virtuálního stroje, stejně jako bytekód v Javě. Rozdíl je v tom že BASIC má mnohem menší požadavky na stroj i na programátora
). A pokial na Spektre chcem aj ine znaky nez su v standartnom fonte, nie je najmensi problem si cokolvek nadefinovat v uzivatelskej grafike (kody 144-164) a to potom vypisat.