En 1989 forma un supergrupo alternativo pre-grunge llamado Tin Machine, un cuarteto con Reeves Gabrels, Tony Sales y Hunt Sales, con el que según sus propias palabras, intentaba recoger el espíritu de las bandas punteras del indie rock del momento, como Sonic Youth o The Pixies.
