Você pode escrever seus registros personalizados da seguinte forma:
LogFormat "%h %l %u %t \"%r\" %>s %b" common
CustomLog logs/access_log common
o %h
é o endereço IP do cliente, apenas omita:
LogFormat "%l %u %t \"%r\" %>s %b" common
CustomLog logs/access_log common