Можно ли признать отказ от наследства не действительным?

После смерти отца остался дом, наследники мать и пятеро детей(все совершеннолетние), изначально все хотели отказаться от наследства в пользу младшего брата, но один из старших детей решил принять наследство. Младший брат обратился к адвокату, он ему сказал что нужно будет оформлять только через суд, когда прошло полгода после смерти отца адвокат сообщил младшему брату, что старший брат написал отказ от наследства, поэтому остальным нужно сходить к нотариусу написать отказ, мы с сестрой сходили и написали. Нотариус сказал отказ не в пользу кого-нибудь,а просто отказ потому что полгода уже прошло. Но теперь оказывается что старший брат не отказался и будет вступать в наследство.
И теперь доля наследства у старшего брата будет больше. Можно ли признать отказ от наследства не действительным?