När hans äldre bror Joe går bort, får Lee Chandler veta att brodern utsett honom till ende förmyndare för sin son. Lee tar tjänstledigt och återvänder motvilligt till hemstaden Manchester-by-the-Sea för att ta hand om Patrick, en livlig 16-åring. Där påminns han om det förflutna som tvingade honom att bryta upp med sin fru och det samhälle där han vuxit upp. Stärkta av minnet av mannen som höll deras familj samman, kämpar Lee och Patrick för att anpassa sig till en värld utan honom.