Sim, é seguro, a classificação de saída de energia está entre 2-4 V (que está no intervalo do original) e os Amp's também estão no intervalo.
As classificações do adaptador de energia explicam a quantidade de energia que ele pode suportar, não o que ele fornece diretamente. Sua 'entrada' significa que o próprio adaptador usa a linha CA de 100-240v usando 1,5 amps e converte em corrente DC com potencial para fornecer entre 18-20V a uma taxa de 2-4A, o que significa que pode uma carga total entre 36-80 W sem fornecer mais potência do que a necessária para o dispositivo (provavelmente através de algum tipo de filtro de linha / ruído / etc).
Lembre-se de que a qualidade das peças nos adaptadores pode fazer a diferença, mas geralmente nas classificações de potência que você está lidando com você deve estar ok.
Sempre tente conectar o novo adaptador com o primeiro desligamento (se você ainda não começou a usá-lo)