Você estava correto quando achou que era um problema de permissões.
Use 'sudo' para executar o software que deveria falar com o dispositivo ou execute o seguinte comando:
sudo chmod 0666 /dev/ttyUSB
quando o dispositivo está conectado. O comando acima irá forçar as permissões no dispositivo para permitir a leitura / gravação de todos.
O problema é que você terá que executar o comando acima TODAS AS VEZES você desconecta e reconecta o dispositivo.