Depende da frequência (no barramento, não na CPU) e do comprimento da conexão.
A verdadeira questão é: você deve tratar suas interconexões como linhas de transmissão? Se o comprimento de onda nos "fios" for uma fração significante - digamos 0,1 - do comprimento do fio, então sim, e não somente deve originar e carregar a correspondência de impedância, a impedância de TL também deve.
Supondo um fator de velocidade de 0,7, então a 100 MHz seu comprimento de onda seria de cerca de 4 metros, então você deve começar a se preocupar com cerca de 0,4 m. O "0.1" pode variar dependendo de quão conservador você quer ser.