Năm 1786, Nguyễn Thiếp quyết định rũ áo, từ quan, lên núi Thiên Nhẫn lập trại và dạy học, bắt đầu sống cuộc đời ẩn cư với danh hiệu La Sơn Phu Tử.