很快，他和妻子卢克雷迪亚拥有了两个孩子，这让他需要更多的金钱来源，哪怕很远路程的要求，他都会为了让家人过上幸福生活而不辞劳苦。
（塞缪尔为自己妻儿画的画像）
为此在他们第三个孩子出生前，他留下了妻子在纽黑文，因为这个时候妻子已经处于怀孕的晚期，因此她深情的为丈夫写了一封信：“我深信现在我们放飞了一个理性的希望，但不会太远，你就可以在你深爱的家庭的怀里幸福。”
但谁会想到，正是这一别就让他再也见不到妻子。在异地的塞缪尔不久后就收到了父亲的一封来信，他的父亲写道：“当我告知你深爱的妻子突然意外去世时，我的心感到痛苦和深深的悲伤。”由于当时的年代送信的主要方式是通过骑马，因此信息的传递相当落后！
这样的结果导致了其实塞缪尔在收到父亲信件的时候其实已经几天后，塞缪尔甚至不能见妻子的最后一面，出席妻子的葬礼。这让塞缪尔悲痛欲绝，妻子最后为自己留下了三个孩子，然而自己却什么都不能为妻子做到。为此他暗自决定了一个事情。
1832年，当他从欧洲乘船返回的时候遇到了从波士顿而来的查尔斯，同为受过高等教育的两人交谈甚欢，而查尔斯为塞缪文展示了各种关于电磁铁的实验，这个时候塞缪尔似乎有了一些灵感。但没有什么金钱的他实现不了心中的构思，他决定继续以艺术家的身份..。
但当他希望为华盛顿美国国会大厦绘制一副圆形大厅的历史性场景，他的游说失败了。当他希望竞选纽约市本土候选人的时候，选民认为他的学术足够，然而思想主张不适合当职权者。悲痛欲绝的塞缪尔逐渐放弃他的绘画，转而实践自己心里一直朦胧的计划。
他脑海里构思了一个女性在桌子旁敲着小机关，纸条上满布有规律的点和线，而在远方的某人正在接收着这些信号。这是基于一种机器，通过打开和关闭电路将信号发送到电线。接收机器将使用电磁铁将信号标记为一系列点和短划线的概念。
