I file .DS_Store conservano le informazioni di visualizzazione delle cartelle (come i Desktop.ini su Windows se non ricordo male), mentre le altre cartelle dovrebbero essere il cestino. Ad ogni modo, non ho una penna USB sotto mano e non so darti certezze.
Per ripulire la penna da questi file ci sono alcuni software:
Ma resto del parere che non sia uno sforzo eccessivo eliminare a mano questi file, cosa anche inutile, perché la prossima volta che collegherai la penna al Mac questo li ricreerà puntualmente.
Ci sono opzioni che permettono di non creare questi file su dischi di rete, ma su drive USB non saprei.
Link discussione originale.