Bom dia!
Eu entendo que não precisa entregar a EFD ICMS, pelo fato de não ter a inscrição estadual, e logo, não ter a possibilidade de ter operações obrigadas ao envio. Mas é importante verificar a fundo, se a empresa se enquadra em alguma especificidade quanto a isso. Se necessário, aconselho a tentar contato com o Fisco estadual também, só para ter um respaldo maior.
Espero ter ajudado.