apacheのレスポンス改善にdiskcache、memcache の各モジュールが用意されているとのこと。
メモリキャッシュの設定で効果が実感できるとの記事を見つけ、早速試してみました。mem_cache.conf　に

MCacheSize

MCacheMaxObjectCount

MCacheMinObjectSize

MCacheMaxObjectSize

の値を書き込んで（ちょっとぜいたくな値にしてみました）、

cache.load
mem_cache.conf
mem_cache.load

を有効にして、apacheを再起動。
今のところ、以前のlighttpdよりレスポンスいい感じです！！