История Only Yesterday крутится вокруг Таеко, одинокой женщины работающей в офисе в Токио (действие происходит в 1982 году), взявшей отпуск чтобы провести его в деревне с семьей своей родной сестры. Во время отдыха Таеко неожиданно для себя обнаруживает, что вспоминает времена, когда она была маленькой и училась в школе в далеком 1966 году. Действие фильма постоянно скачет назад и вперед между двумя временными периодами с ностальгией и прекрасными горными пейзажами, в то время как Таеко расставляет по полочкам свои воспоминания и пытается принять трудное решение о своем будущем...