The Affair explora os efeitos emocionais de uma relação extra-conjugal entre Noah Solloway e Alison Bailey depois de se conhecerem na vila costeira de Montauk em Long Island. Noah é um professor em Nova Iorque e ex-aluno da Williams College que conseguiu publicar um romance e está a ter dificuldades a escrever o segundo. Tem um casamento feliz e quatro filhos, mas ressente o facto de estar dependente do dinheiro do seu sogro rico. Alison é uma jovem empregada de mesa que está a tentar juntar os cacos da sua vida e do seu casamento após a morte do seu filho. A história do caso é contada separadamente e as memórias mudam consoante às perspetivas.