沒有簽訂勞動合同的勞動協管員能正常退休嗎？

我是區裏擴面徵繳勞動協管員，還有兩年就到退休年齡，人在勞動部門工作，工資卻在中介發放，中介公司説我們是幫勞動局忙，你們勞動關係不在我們中介公司，但勞動部門也沒有和我們簽訂合同和檔案，那我到底退休在哪個單位？