Evitar giro de cámara que mira para abajo

Pues eso, normalmente siempre he usado la cámara en dirección paralela al suelo, me acabo de dar cuenta de que si la colocas mirando hacia abajo y mueves sólo la cámara y no el target, la cámara gira automáticamente 90 grados o 180 grados dependiendo de en qué sentido la muevas.
¿Hay alguna forma de evitar eso? Gracias, saludos.

Gracias por la respuesta, no sabía qué era un problema generalizado,