Digo yo que igual que limpias los del vapor no?, yo tengo una ensaladera de bambu y la limpio normal, eso si como todos los objetos de madera tienes que dejarlos secar al aire hasta que esten totalmente secos.
Las esterillas de bambu, sobretodo si quieres hacer california rolls (los que llevan el arroz por fuera), usalas con film de plastico, para no entretenerte limpiando los granitos de arroz que se quedan entre las varillas.