Rosemary Kennedy diperkirakan memiliki masa kecil yang bahagia, dan ibunya mengatakan dia adalah “gadis penyayang”, menurut Nationwide Park Service. Namun, saat Rosemary muda memasuki masa remaja, dia dilaporkan sering mengamuk dan meledak-ledak. Ini juga terkadang berubah menjadi fisik. Sementara sedikit yang diketahui tentang kecacatan intelektual di period Rosemary, ledakan seperti itu kemungkinan besar disebabkan oleh frustrasi dan hambatan komunikasi.

Juga tidak mudah menjadi seorang Kennedy. Dengan demikian, amukan Rosemary sangat mungkin terkait dengan tekanan yang dia alami karena menjadi bagian dari keluarga yang begitu terkemuka dan melindungi reputasi. Ayahnya Joseph P. Kennedy sangat terlibat dalam politik lokal selama masa kecilnya dan juga presiden financial institution lokal. Dia akan menjadi “salah satu orang terkaya di Amerika” karena usaha bisnisnya, menurut PBS, dan dia juga menjabat sebagai Duta Besar AS untuk Inggris Raya dan ketua Komisi Sekuritas dan Pertukaran dan Komisi Maritim. Pandangan isolasionisnya akan menahannya dalam upaya politik, jadi dia akan berusaha menekan putra-putranya ke jabatan politik.

Seperti yang ditulis oleh sejarawan dan penulis Kate Clifford Larson di situs webnya, “kurangnya kemajuan Rosemary seiring bertambahnya usia, dan kesukaannya pada kegiatan sosial, membuat orang tuanya frustrasi.” Hal ini pasti menimbulkan konflik antara keluarga Kennedy berprestasi dan Rosemary, yang sering disalahpahami. Seperti yang ditulis Clifford Larson, dia mengalami “kecemasan yang meningkat atas standar yang tidak pernah bisa dia penuhi.”