Para mi, lo mejor es sustituirla por otra nueva; ya que como bien apuntas, al pegarla de nuevo no queda bien, porque se ha dado de si y no encaja bien.
Te dejo un enlace, donde puedes encontrar una goma nueva de repuesto. Limpia bien los restos de pegamento y solo tienes que colocarla:
Pieza de repuesto para cámara Nikon D5500, cubierta delantera, lateral izquierdo|Piezas de carrocería| - AliExpress
Saludos