Bicarbonato de sodio es bicarbonato de sodio, siempre y cuando no se moje, nunca se apagará.
El polvo de hornear tiene varias fórmulas diferentes, pero en general no me preocuparía usar polvo para hornear de varios años e ignoraría las fechas de caducidad.