작가인 노아 솔로웨이는 아내 헬렌과 네 자녀를 데리고 롱아일랜드 몬턱에 있는 헬렌 아버지 소유의 집에서 여름을 보내기 위해 찾아온다. 그곳에서 우연히 만난 앨리슨 베일리에게 노아는 묘한 감정을 느낀다.

헬렌의 아버지 브루스 버틀러가 저택에서 파티를 열고 노아와 헬렌은 파티 장식으롤 쓸 꽃을 사러 시장에 간다. 시장에서 앨리슨을 다시 만난 노아는 앨리슨이 유부녀란 사실을 알게 되고, 파티에서도 또다시 마주치며 함께 해변을 걷는다.

노아는 앨리슨에게 끌리는 감정이 위험하다는 걸 깨닫고 앨리슨과 거리를 두지만 그럴수록 앨리슨에 대한 생각은 깊어진다. 한편 마을 회의에서 랍스터롤의 사장 오스카와 앨리슨의 남편 콜은 사업 확장을 두고 의견을 좁히지 못한다.

노아는 책의 배경을 조사한다는 핑계로 앨리슨과 단둘이 블록섬으로 여행을 떠난다. 부쩍 가까워지는 관계 속에서 시시각각 변하는 앨리슨의 태도에 노아는 혼란스러워하고, 앨리슨에게 더욱 빠져든다.

앨리슨의 친구인 피비의 집에서 앨리슨과 노아는 밀회를 가지고, 이후 노아는 가족에게 거짓말까지 하며 비밀스러운 만남을 이어 간다. 둘만의 행복감에 젖어 있던 것도 잠시, 휘트니에게 문제가 생기고 앨리슨도 할머니 요양원에 누군가 찾아왔다는 소식을 듣는다.

앨리슨의 태도에 수상함을 느낀 노아는 앨리슨의 뒤를 미행하다 석연찮은 모습을 본다. 헬렌은 노아가 더 이상 자신을 원하지 않는 것 같다며 노아에게 서운함을 토로하고, 노아는 헬렌을 달래며 둘만의 시간을 보내기로 한다.

여름이 끝나자 솔로웨이 가족은 브루클린으로 돌아가고 노아와 앨리슨도 각자의 가정을 지키며 하루하루를 보낸다. 그러던 중 오스카가 비밀을 폭로하겠다며 노아에게 돈을 요구하고 노아는 압박감에 못 이겨 맥스를 찾아간다.

노아와 앨리슨은 각자의 일상에서 자기 자리를 지키며 가족과의 관계를 되돌리려고 애쓴다. 헬렌은 여전히 노아를 믿지 못하고, 노아는 자신의 노력을 알아 달라며 헬렌 대신 장인어른을 모시고 시상식에 참여한다. 그곳에서 우연히 앨리슨과 다시 마주친다.

노아는 여전히 앨리슨과 밀회를 이어 가고 헬렌을 떠날 결심까지 하지만, 지금은 시기가 아니라며 앨리슨에게 기다려 달라고 한다. 목장을 팔면 콜과 떠날 생각이던 앨리슨은 오스카에게 충격적인 말을 듣고 절망한다.

헬렌과 별거 후 난잡한 생활을 이어가던 노아는 학교에서 풍기 문란을 일으켜 감호소에 들어가고, 그곳에서 소설을 완성해 출판사와 출간 계약을 맺는다. 몬탁을 떠나 아테나와 함께 지내며 마음의 안정을 찾아가던 앨리슨은 집을 처분하기 위해 몬탁으로 돌아온다.