Eetcafé De Hertog ligt de grens van Westouter en Poperinge, op het kruispunt van de Lenestraat, de Westouterseweg (P) en de Brabantstraat en de Poperingseweg (W). Vanuit Westouter is het op de linkerkant het eerste huis van het gehucht De Brabant.