Vermoedelijk genoemd naar een heiligenbeeld, de apostel Jacobus voorstellend, dat aan de gevel op een van de straathoeken heeft gezeten.
De Sint Jacobskapel zal niet de naamgever zijn geweest, daar deze kapel noordelijker aan de Nieuwendijk was gelegen.
