Психолог не может направлять в ПНД, это делает призывная комиссия. Психолог или психиатр должен написать подробное мотивированное заключение в листе медосвидетельствования, на основании которого призывная комиссия принимает решение о направлении на доп. обследование в ПНД.
Если у вас нет письменного направления, то проходить ничего не должны.

Основанием для явки в военкомат является исключительно повестка. Идти без нее самому или нет, решать вам в зависимости от ваших обстоятельств.