Você não está permitindo que pacotes relacionados voltem. O que você está vendo não é apenas que o ping não funciona, mas que você não pode nem mesmo resolver nomes DNS. Você precisa fazer uma correspondência de estado para os pacotes ESTABLISHED e RELATED:
iptables -I INPUT -m state --state ESTABLISHED,RELATED -j ACCEPT
Você pode também permitir ping de entrada também:
iptables -I INPUT 2 -p icmp --icmp-type echo-request -j ACCEPT