Slottet er opført i 1500-tallet. Det brændte i 1893 og blev genopbygget i 1904.

Vallø Slotspark er åben alle ugens dage fra kl. 8.00 til solnedgang. Der er endvidere også adgang til slotsgården.

Slottet er omgivet af gamle brostensbelagte gader, hyggelige huse og voldgrav. Slotsparken er et særdeles flot anlæg, med sjældne træer fra hele verden. Parken er et besøg værd på alle årstider.