Buje liegt im Nordwesten der Halbinsel Istrien, in der Nähe der kroatisch-slowenischen Grenze. Die Stadt befindet sich auf einem Hügel und bietet spektakuläre Ausblicke auf die umliegende Landschaft, einschließlich der Adria und der slowenischen Küste.