起了“可爱的老色鬼”的形象，这个称谓并没有使他感到有丝毫的不自在。自1953年起，他的性观念有了很大的改变，这最终导致了他婚姻的崩溃。

我曾在前文中提过，杰特鲁德对性生活不感兴趣。从艾萨克本人对此事的记载及从这对夫妇的一些朋友那儿了解到的情况看，杰特鲁德的性冷淡实际已发展成为性无能。她极有可能根本达不到性高潮，结果使阿西莫夫的性生活成了一种敷衍了事的过程。很难说清是什么导致了杰特鲁德的性无能，因为她不可能与他人谈论性生活的感受。我只能认为有可能是因为不和谐。艾萨克具有他那代一人的典型特点。他所受的教育不允许他公开探讨性感受，除非是讨论临床医学问题。双方都开不了口，互相怨恨之情又不断加深，这无疑将使事情变得更糟。

1953年4月，艾萨克请一位在医院里认识的年轻女人共进午餐，她带了个女友一同去了。结果艾萨克与这位女友一拍即合。餐桌上，他极尽挑逗之能事，不断说着自己常说的那些轻薄话，而那位女友竟对艾萨克的接连轰炸应对如流。这使得整个情形非同一般，当即便给艾萨克留下了很深的印象。

午餐后，阿西莫夫将朋友送回家。那位住在坎布里奇的女友又请他送她回家。接着，她又请他进屋喝咖啡。事情一步步地发展，最后两人上了床。

艾萨克称，他是被人勾引的，并且事后他马上产生了一种犯罪感，觉得很羞愧。他以前从未越轨过，觉得自己陷入了一个失控的境地。他可能是失控了，但他喜欢这种失控的感觉。

艾萨克竭力表示，这次经历令他开了眼。有史以来第一次，他在做爱后觉得自己是个成功的情人，他很快得出结论，不是他就是杰特鲁德有问题，否则的话，杰特鲁德不会如此厌恶性生活，致使整个过程总是那么机械。两人结婚时都是童身，他们的性关系是在新婚之夜笨手笨脚的基础上开始的，11年过去了，似乎也没长进多少。

虽然阿西莫夫感到内疚、惊恐，但他也为自己满足了一个女人的需要而洋洋自得。直到那时，他才意识到自己需要的是什么，他声称自己并没有马上开始一连串的徽情与婚外性生活，但大量证据表明，自1953年起，艾萨克就已获得了性解放，随着不忠行为的日益增多，他有了许多婚外性伴侣。久而久之，他的内疚与恐慌也烟消云散了。

尽管艾萨克没有把自己在坎布里奇的艳遇告诉杰特鲁德，但她对丈夫的变化并非毫无觉察。艾萨克讲了一件事。事情发生后不久，一次，一家人利用周末开车回纽约探望亲戚，他注意到杰特鲁德似乎对他不满，并无缘无故地乱发脾气。另外，她还提到了离婚，这可是结婚以来的第一次，进一步证明了杰特鲁德对发生的一切是心中有数的。我们可以认为杰特鲁德是心甘情愿地忍受艾萨克对她的冷淡、对工作的全身心投入，但当她发现了丈夫的不忠时，她开始觉得这段婚姻走到了尽头。据艾萨克的自传记载，这第一次婚姻裂痕出现在1953年，当时他与坎布里奇的那位年轻女人第一次发生关系并没多久。

从其他任何方面来看，阿西莫夫一家都给人留下了欢乐家庭的印象。经历了这次风波，他们并未离婚，看来杰特鲁德权衡再三，还是觉得他们婚姻中积极的方面要多些。她要么是决定接受丈夫的不忠，要么是当这件事没发生过。从艾萨克本人对当时情形的记载来看，他认为杰特鲁德对他的婚外情毫无觉察，但他一直都害怕她会发现。多年以后，他极力向世人，尤其是他的妻子，展示自己“可爱的（但不是实际意义上的）老色鬼”形象。但他骗不了别人，更骗不了杰特鲁德。

即使那时，在婚姻如此动荡的情况下，艾萨克也没足够的时间来陪杰特鲁德，这一点显而易见。他当时正忙着写后来令他声名远扬的那些书。他不是个好丈夫，却是个好父亲，特别宠爱罗宾。在杰特鲁德试图解决家中的现实问题时，艾萨克把自己埋在了工作中。他多次承认，他经常把写作当作一种逃避方式。