Python2 e Python3 usam diferentes versões de pandas.
Para o Python3, você pode instalá-lo usando apt install :
sudo apt-get install python3-pandas
Para instalá-lo usando pip , você deve usar pip3 para Python3 :
sudo apt-get install python3-pip
sudo -H pip3 install pandas