Howard, en pensionerad sjökapten, vägrar ta emot hjälp av sin dotter Grace. När hon anlitar Annie som hushållerska blir Howard oväntat förälskad. Han ger all sin kärlek till Annie och hennes familj, men avvisar sin egen dotter. My Sailor, My Love är berättelsen om ett skuldbelagt dotter-faderförhållande. Men också en kärlekshistoria mellan två äldre människor som visar att en ny början aldrig är för sent.