Você pode fazer isso com INDIRECT . No entanto, para obter o incremento automático, é necessário usar também ROW ou COLUMN .
Por exemplo você pode usar essa fórmula em vez do seu primeiro exemplo:
=INDIRECT("FirstSpreadSheet!A"&ROW())