¿Es mejor extraer las muelas del juicio impactadas cuando todo está tranquilo?

Hace poco me hicieron una limpieza dental y me dijeron que mi muela del juicio está bien colocada. Sin embargo, ahora mismo no me duele nada. El dentista me asusta diciéndome que si espero a ser mayor para que me la extraigan, la recuperación será lenta y podría dañar los dientes de al lado... Me aterra que me saquen una muela sana cuando no me duele. ¿Sería una tontería esperar a que empiece a doler?