Meestal wordt de poort vermeld als Fiolenpoort - en dat zou kunnen slaan op het bijbelboek Openbaringen waarin 'fiolen' staan voor Gods toorn of gramschap. Maar in het Huisnommerboek wordt gesproken over de Violenpoort - en dat doet denken aan het bekende plantje of muziekinstrument. Het is dus moeilijk om uit te maken wat de naamgevers hebben bedoeld.
De poort achter de noordzijde van de Molensteeg (nu het speelplein van de Lucas van Leydenschool) telde vijf huisjes. Ze wordt niet vermeld door Salomon van der Paauw, maar blijkt in 1849 wel bewoond te zijn. In 1885 staat een van de huisjes nog te huur, maar daarna lijkt de poort geruisloos te zijn verdwenen.