Até ao século XVIII foi uma aldeia chamda Taleigão, foi ganhando importância principalmente a partir de 1759, quando o vice-rei da Índia Portuguesa ali instalou a sua residência, em 1 d dezembro. Antes de se mudar, o vice-rei remodelou a fortaleza do Idalcão, transformando-a num palácio. Em 1843 tornou-se oficialmente a sede administrativa da Índia Portuguesa, em substituição da cidade de Goa (que gradualmente passou a ser conhecida como Goa Velha), tendo então mudado de nome para Nova Goa.

Como o resto das possessões portuguesas na Índia, em dezembro de 1961 Pangim passou a fazer parte da União Indiana, ficamdo como capital do território da União de Goa, Damão e Diu. Quando Goa passou a ser um estado, em maio de 1987, Pangim passou a ser capital estadual.