Si può dire anche “bicchieri di cristallo” e “guanti in pelle”. Se andrai in un negozio leggerai sull’etichetta dei prodotti in pelle, in cristallo, in legno etc., ma entrambe le preposizioni sono corrette.
“Di” prevale nell’uso parlato. Ricordo, per esempio, questo vecchio film di Dario Argento: “L’uccello dalle piume di cristallo”.
https://www.imdb.com/title/tt0065143/