Gümüş speelde in de jeugd bij TSV Aach-Linz, SC Pfullendorf en VfB Stuttgart. In juli 2014 tekende hij als transfervrije speler een vijfjarig contract bij Galatasaray SK. Op 16 december 2014 debuteerde hij in het eerste elftal in het bekerduel tegen FBM Yaşamspor. De linksbenige vleugelspeler was meteen trefzeker bij zijn debuut.[2] Tien dagen later volgde zijn competitiedebuut tegen Gençlerbirliği SK.[3] In zijn debuutseizoen speelde Gümüş slechts vier competitieduels voor Galatasaray. Op 15 september 2015 maakte hij zijn debuut in de UEFA Champions League, als invaller voor Lukas Podolski tegen Atlético Madrid.[4]