O método básico é
ffmpeg -i in.mp4 -r 50 -profile:v baseline -crf 18 -c:a copy out.mp4
Como você está fazendo para fins de edição, defini o perfil como linha de base para um desempenho de pesquisa mais rápido. CRF controla a troca de qualidade / tamanho - menor é melhor, mas maior. O áudio é copiado.