Na Rua do Quebra-Costas existe um edifício de dois pisos com um curioso painel de azulejos, onde figuram alguns elementos iconográficos. Segundo a tradição, este edifício foi a Casa da Inquisição. Os relatos do povo descrevem-na como sendo um local de tortura, onde os inquisidores infligiam os mais terríveis tormentos aos seus prisioneiros.
No entanto, a falta de provas documentais não corrobora esta tradição. Supõe-se que este edifício tenha estado ao serviço da Inquisição, não como tribunal, mas como arquivo de processos ou como prisão temporária dos prisioneiros, que mais tarde seriam julgados no Tribunal do Santo Oficio em Évora.
O edifício é hoje o Centro Interativo da História Judaica em Monsaraz.