Edifício existente em meados do século XVI e que terá sofrido algumas transformações e remodelações arquitetónicas por engenheiros militares. Possui uma arquitetura rigorosa, simples e funcional, com a fachada lateral paralela ao rio Guadiana e a fachada principal orientada para norte.
Está assinalado em três desenhos que José de Sande Vasconcelos fez da praça de Alcoutim, nos finais do século XVIII. Num desses registos, o edifício vem legendado como sendo “Casas do Juiz da Alfândega”.
No século XX, serviu de Posto da Guarda-fiscal. Encontrava-se devoluto até ser reabilitado, recentemente, para aí funcionar o Serviço de Finanças de Alcoutim.