Воспоминания не мучают.
Это, похоже, люди сами мучают воспоминания