Между тем болезнь Витберга усиливалась, припадки повторялись чаще и чаще.
В 1848 году Федор Иванович Прянишников стал доставлять Витбергу работу -- составлять рисунки для корзин, в которых он подносил высокопоставленным лицам в Новый год заграничные журналы и кипсеки.
В то же время Витберг брался составлять по заказу памятники и монументы. В его положении это была единственная доступная для него работа. Заняться чем-нибудь более важным ему не приходилось, да он едва ли бы и мог: болезнь окончательно его одолевала,
Когда кому то вздумалось устроить в Петербурге сообщения в общественных каретах и понадобился для этого рода экипажей рисунок, то заказ был сделан Витбергу, и он его исполнил.
В 1851 году скончалась вторая супруга Витберга. Утрата ее была для него новым и последним ударом, за которым последовал паралич.
В 1854 году на него обрушилось еще несчастие -- пожар, в котором он едва не погиб; его спас бывший его ученик Чарушин, живший в его семействе. В этом пожаре погибли почти все рисунки и чертежи многолетних трудов Витберга; затем, что было спасено, погибло в семействе, после его кончины, также в пожаре.
12 января 1855 года Витберга не стало. Он кончил жизнь шестидесяти восьми лет от роду и похоронен на Волковом кладбище. При последних минутах художника присутствовал его любимый ученик из Вятки Д. Я. Чарушин; похоронил его на свой счет П. И. Репин, член комитета по сооружению Александро-Невского собора в Вятке.
Витберг изведал все муки, которые могут быть знакомы только людям, обладающим даром творчества: чувствовать, что мог бы привесть в восторг всех красотою своих созданий, величием и блеском идей, воплощенных в прекрасные формы, и в то же время ограничиваться изображением их на бумаге, зная, что никогда они не воплотятся в те формы, которые увековечили бы их для потомства. Тем не менее, имя Александра Лаврентьевича Витберга навсегда принадлежит истории искусств. Справедливость этой мысли провидел вятский друг художника и, вспоминая о его гениальном проекте храма Христа Спасителя в Москве, с полным убеждением писал ему: "Подвиг ваш не останется втуне, нет, человечество имеет свою мерку великому, и ваше место в истории искусства занято".
В PC, 1876 г., No 12, стр. 770, за этим следовало два абзаца, отсутствующие в отдельном издании: "Александр Лаврентьевич Витберг вполне заслуживает, чтобы, наконец, была отдана справедливость его дарованию, его возвышенному миросозерцанию и его честному, благородному, неподкупному характеру.