Malcolm är 55 år. Han bor kvar i huset med sin gamla mor Alfrida. En kvinna som använder tystnaden som vapen så fort någonting obehagligt dyker upp. Malcolm är en man som knappt varit utanför kommunens gränser, en ofrivillig ensling. Under hela sitt liv har han suttit fast i sin mors rutiner och inte kommit sig för att bryta sig loss. För vem är han, utan henne? När han en dag blir uppsagd från arbetet förändras han i grunden. Någonting måste göras, något som borde ha gjorts för många herrans år sedan. Det är dags att göra upp med Alfrida, ta reda på vad som döljer sig i tystnaden och våga ta steget ut i det okända.
Allt stannar hos mig är en berättelse om familjehemligheter, svek, spirande vänskap, sorg och förlåtelse.