Атомический подход к изучению языка

выделение в тексте слов, чисел, нахождение границ устойчивых сочетаний и предложений; выделяемые текстовые единицы называются токенами.

процедура, позволяющая получить при помощи алгоритмов формализованную синтаксическую структуру предложения.

(от франц. аrgot – жаргон) – слова и обороты, входящие в состав какоголибо арго (условная речь относительно замкнутой социальной группы или сообщества, с элементами «тайности»: театральное, спортивное, воровское, картежное, армейское и др. виды арго) и при этом широко используемые в общей речи.