De acordo com o wiki do OpenOffice , todos os itens que você deseja ver na Tabela de O conteúdo deve ser estilizado como título. Então mude o estilo de títulos de parágrafos para cabeçalho (1,2,3 etc.) e você os verá na Tabela de Conteúdo.
Em seguida, clique com o botão direito do mouse na Tabela de Conteúdo e selecione Atualizar Índice / Tabela no menu pop-up.