обьясните от начала до конца плиз

а как работает делиметр?

Делиметр - это разделитель, относительно которого строка разбивается на токены.

Тобишь у меня разделитель "//." это вот это, да? А если бы было "Ам" допустим? Как юы он разделял? и как понять на сколько строк он будет делить? там указанно что после каждой точкой? "//." я правильно понимаю?

я проверил там если просто точку оставить без слешей , будет тоже самое , зачем там эти два слеша

Они там и не нужны. В этом разница между String.split и токенайзером. Насчёт слэшей. Во-первых не "//.", а "\\.". Символом "\" в регулярных выражениях экранируются символы, когда надо, чтобы спецсимволы использовались в буквальном смысле. Сам символ \ тоже надо экранировать, поэтому их пишут два. Только вот в токенайзере не используются регулярные выражения :) Для токенайзера каждый символ переданный в качестве делиметра строки является разделителем. То есть твой токенайзер будет разделять не только по точкам, но и по обратным слэшам:

public static void main(String[] args) {
	String source = "test\\java.utils";
	String delimiter = "\\.";
	StringTokenizer tokenizer = new StringTokenizer(source, delimiter);
	while (tokenizer.hasMoreTokens()) {
		System.out.println(tokenizer.nextToken());
	}
}

Разделяет и по слэшу и по точке:

test
java
utils

Если бы цель была разделить методом split по точке, то вот там было бы нужно использовать последовательность "\\.", потому что без этого символ точки в регулярных выражениях означает "любой символ".

в моей задаче слеш нужен был только в случае использования метода split?

чтобы данный метод понял что это символ(точка)?

Если цель была использовать в качестве разделителя только точку, то да