20岁左右记忆力越来越差需要查找原因，针对不同疾病进行不同治疗，单纯吃部分食物无法纠正，具体原因如下：

1、脑部器质性疾病损伤：比如脑肿瘤，会引起患者记忆力衰退；

2、自身免疫性脑炎或脱髓鞘性疾病：可引起患者记忆力减退；

3、全身系统性疾病：比如甲状腺功能减退，患者会出现记忆力衰退；

4、抑郁症：患者会注意力不集中、记忆力下降，可能还会出现心境低落、消极、沮丧。