حكم من أحرم للحج ولم يقل عند الأحرام (ومحلي حيث حبستني) ومسكوه ورحلوه وهو محرم

رجل أراد الحج قبل ١٢ سنة وعندما أحرم لم يقل في نيته ومحلي حيث حبستني فمسكوهم ورحلوهم ولم يخرج فدية من ذلك الحين بسبب جهله فما يلزمه؟