1777年，斯密谋得了爱丁堡海关专员的职位。1778年，斯密在爱丁堡的卡农加蒂区租下来一所很好的房子，并先后把他的母亲、表妹和外甥接来同住。这是一段祥和的晚年生活。除了自己的海关事务，他把很多时间都用在了和朋友相处上。母亲、朋友和书籍，成了斯密的“人生三乐”。

晚年，斯密的理论不仅让他征服了学者，而且为他赢得了崇高的社会声望。当时的许多政府要员，都自称是斯密的弟子。英国历史上影响最大的首相之一——皮特，就是他忠实的信徒。据说，在一次会面的时候，斯密最后一个到达，他一进屋，大家就全体起立欢迎他。斯密说：“诸位，请坐！”皮特回答说：“不，先生，您先坐，我们再坐。我们都是您的学生！”

1787年，斯密当选为格拉斯哥大学荣誉校长，并任职至1789年。

在爱丁堡的这段时间，斯密每周日都和亲密的朋友化学家约瑟夫·布莱克和地质学家詹姆士·哈顿，在一个酒馆吃饭。在去世前的一个星期，斯密把他们找来，坚持让他们烧掉他的所有手稿，只留下少数可以发表的稿子。最后，两个人找出并烧掉了所有的东西——16卷手稿！不知道是幸运还是不幸，1958年，他当年讲授法律时的大量学生笔记被发现，后来作为《法理学讲义》出版，当然这是后话。

烧掉手稿后，斯密如释重负。又到了周末，他的朋友照例来访，准备共进晚餐，斯密拒绝了。“我喜欢和你们在一起，先生们，但我觉得我必须离开你们到另一个世界去了。”在接下来的星期天，1790年7月17日，他离开了人世，享年67岁。