Есть ли разница между использованием моего маршрутизатора в качестве dns-сервера или установкой его непосредственно на моем компьютере?

единственная разница в том, что установка его на маршрутизатор означает, что он получит настройки DNS от этого. Таким образом, если вы измените DNS-сервер на маршрутизаторе, вам не придется вручную менять его на любых машинах.

Если вы используете одни и те же данные DNS-сервера на обоих, вы можете также позволить маршрутизатору справиться с этим, как если бы вы решили изменить его позже это будет немного меньше хлопот, чтобы сделать это. На самом деле, это не имеет никакого значения.