Concluído em 1697 e edificado por ordem do Duque de Cadaval, para segurança de Setúbal face aos ataques inimigos e para que os produtos passassem pela Fazenda Pública para pagar impostos.

O nome por que é conhecido ficou a dever-se a D. João IV, monarca que tomou Nossa Senhora da Conceição como protetora do reino.

Atualmente acolhe a Escola de Hotelaria e Turismo de Setúbal.