Tente isso
$list=import-csv("myfile.csv")
foreach ($entry in $list) {
$withExt=$entry.FullName+".txt"
write-host $withExt
}
A parte complicada é que o import-csv retorna uma matriz de arrays essencialmente. É por isso que nossa primeira versão é formatada do jeito que está, já que o que o write-host está obtendo é uma lista de listas. Você tem que percorrer cada linha e tratar cada linha individualmente. Ou pelo menos é uma maneira de fazer isso.
Massimo tem o one-liner em um presente.