১৯২১ সাল থেকে ১৯৩৯ সালের মধ্যে তিনি চার বার মাদুরাই গেলেও মীনাক্ষী মন্দিরে প্রবেশ করেননি। দলিত সম্প্রদায় যত দিন না মন্দিরে প্রবেশাধিকার পাচ্ছে, তত দিন বাপু মন্দিরে প্রবেশ করেননি।