O Edifício do IAM era o antigo Edifício do Leal Senado, sendo uma das relíquias culturais da Região Administrativa Especial de Macau. Conforme as informações registadas, em 1784 (49º ano do Imperador Qianlong da Dinastia Qing), os portugueses construíram o edifício de dois pisos em estilo barroco. Por centenas de anos, o Leal Senado foi o centro da vida política dos portugueses em Macau. Ao longo do tempo, o edifício, para além de se tratar da entidade de administração de Macau, acolheu vários serviços, tais como, Museu, Estacão dos Correios, Delegação de Saúde, Tribunal judicial e Prisão. Com o passar do tempo, esses serviços foram sendo transferidos para outros locais. Após a conclusão da sua construção, o edifício passou por diversas obras de restauro devido aos estragos causados por tufões e pela formiga-branca. Depois de grande obra de restauro em 1940, o actual edifício e a respectiva fachada foram mantidos até agora.