Por enquanto, de acordo com o link , a solução é baixar e renomear a roda e instalar usando a roda renomeada:
wget https://storage.googleapis.com/tensorflow/linux/cpu/tensorflow-0.8.0-cp34-cp34m-linux_x86_64.whl
mv tensorflow-0.8.0-cp34-cp34m-linux_x86_64.whl tensorflow-0.8.0-cp35-cp35m-linux_x86_64.whl
sudo -H pip3 install tensorflow-0.8.0-cp35-cp35m-linux_x86_64.whl
Se você estiver disposto a esperar um pouco, a roda do Python 3.5 deve sair em breve, de acordo com o link .