[AVR] Pin Pull-Up Problem

Hallo,

ich hab ein Problem mit dem Pull-Up vom AVR:
Meine AVR(Atmega168PA)-Schaltung (Standard-Beschaltung ohne ADC-Referenz 
oder Sonstiges) soll beim Anlegen der Versorgung (5V) einen Eingang 
(genauer PD3) prüfen und dann entsprechend reagieren (natürlich noch 
mehr, aber das ist das, wofür ich den Eingang verwende).

Lege ich nun 5V am Pin vom AVR (PD3) an, wird nicht nur der AVR von den 
5V am Eingang versorgt, sondern auch die Peripherie rundherum, obwohl 
die 5V-Versorgung dabei nicht angelegt ist.

Nach Studieren vom I/O-Port Teil im Datenblatt (siehe auch Bild 
"pull-up") kann dafür eigentlich nur der Pull-Up Widerstand 
verantwortlich sein.
Laut Datenblatt und Schalplan ist der Pull-Up aktiv, wenn PUD=0. Das ist 
der Fall wenn keine Versorgung da ist, oder wenn Versorgung angelegt 
(PUD ist nach Reset 0, Pull-Up also aktiviert) und man PUD nicht auf 1 
setzt (Pull-Up wäre dann deaktiviert).
Also scheint der FET für den Pull-Up ein selbstleitender Typ zu sein.

Die Erklärung klingt logisch, aber hat wer eine Lösung für mich, mal 
abgesehen von einer Diode am Versorgungseingang?

Danke im  voraus,
Fabian