Man muss die Standard-Route in der Fritz-Box im Ausland auf die eingerichtete VPN-Verbindung nach Hause verweisen lassen. Frag mich nicht, wie man das bei einer Fritz-Box macht.
Ansonsten könnte es bei einem Computer an der Fritzbox auch ausreichen, als Gateway-IP die private IP der Fritz-Box zu Hause anzugeben und wahrscheinlich auch bei der IP für den DNS-Server.