Stämmer det att detta bildar vätgas?

2H2O+NaOH+Al --> NaAlO2+2H2

Och om jag skulle lägga vatten, natriumhydroxid och aluminium i en flaska och sätter en balong på, skulle ballongen fyllas med vätgas?

Inte riktigt. Det ska vara 2Al + 2NaOH + 6H2O → 2Na[Al(OH)4] + 3H2
Men ja, du får vätgas i ballongen.
Kan rekommendera att bubbla gasen genom vatten och sedan leda den till en ballong. Vattnet tar hand om NaOH-stänk från bubblandet, och vid ev. antändning hindrar det eld från att ta sig in i reaktionskärlet. Obs att reaktionen bildar en del värme.