Setzen Sie dazu in der Datei FirefoxPortable\FirefoxPortable.ini den Eintrag DisableSplashScreen auf true.