Есть скрипт, рабочий, делаешь exe pyinstaller'ом при запуске промелькнет консольное окошко и все(
Глупый может вопрос, - но как мне тогда увидеть что не так при запуске?

сделайте батник что то на вроде