Olá Ana Beatriz, tudo bem?
No caso do município do RJ, geralmente esse processo é feito pelo portal Carioca Digital (https://carioca.rio/).
Neste link:
https://carioca.rio/servicos/iss-baixa-da-inscricao-municipal-de-prestador-de-servico-ou-exclusao-de-todas-atividades-de-servicos/
Caso não consiga, recomendo entrar em contato com a central de atendimento da prefeitura para verificar os documentos necessários e o passo a passo.
Espero ter ajudado!