Não, não deve haver nenhum problema de desempenho.
Para o último stick você não pode usar a opção dual-cannel que poderia aumentar o desempenho um pouco, mas como você já está usando dual-channel para os outros quatro sticks você não deveria ter quaisquer problemas de desempenho, pelo menos no que diz respeito à RAM.