Apri il pannello di controllo → Dispositivi e stampanti.
Prendi una stampante installata in rete → click destro del mouse → proprietà stampante → Porte → Configura porta.
Lì riesci a vedere l'indirizzo IP della stampante a questo punto ti basta andare stampante per stampante a cercare quella che ha lo stesso indirizzo IP.
Dopo che hai capito l'ubicazione della stampante rinomina la stampante in Windows con un nome esplicativo.
In alternativa puoi installare, per ogni PC, la sola stampante che gli appartiene e poi sempre rinominarla.