Chamán de la facción desértica (desde Arizona) del rock de raíces norteamericano, Gelb se dio a conocer en los 90 cuando empezó a ser catalogado como uno de los padrinos de lo que entonces se llamaba country alternativo, aunque en parte él ya practicaba eso desde principios de los 80, cuando montó la primera encarnación de su grupo Giant Sand, con el malogrado Rainer Ptacek. La formación fue cambiando de alineación a lo largo de esa década inicial, pero no fue hasta que un par de lustros después aparecieron Joey Burns y John Convertino que empezó a recibir reconocimiento mediático.
Sin embargo, nunca ha sido un reconocimiento masivo, sino un zigzag entre alguna luz promocional y períodos en la sombra. Además, Howe también ha montado OP8 (Giant Sand más Lisa Germano) y colaborado con The Friends Of Dean Martinez y los primeros Calexico -la banda que formaron en 1996 Burns y Convertino y cuyo éxito les hizo después volar en solitario-.Aunque en los 90 publicó dos álbumes en solitario, ha sido este siglo cuando Gelb ha potenciado de forma definitiva esa parte de su carrera. Entre los álbumes firmados con su nombre destacan “\'Sno Angel Like You” (2006) y “Alegrías” (2010; este fue grabado con músicos españoles, bautizados para la ocasión como Band Of Gypsies y encabezados por Raimundo Amador).