Для начала я бы рекомендовал обратиться в письменной форме к работодателю и обосновать обязанность работодателя согласно ст. 114 ТК РФ предоставлять отпуск с сохранением среднего заработка. Либо, если Вы увольняетесь, компенсацию неиспользованного отпуска.
Если это не принесет результата, то далее можно обратиться к государственную инспекцию по труду.
Что касается материальной ответственности. Работодатель может потребовать с Вас компенсации ущерба, например, если согласно ст. 238 ТК РФ имело место быть нанесение прямого действительного ущерба. Но здесь есть много нюансов, особенно, если Вы будете оспаривать действия работодателя в суде и работодателю придется обосновать наличие ущерба, а также отсутствие обстоятельств исключающих материальную ответственность работника согласно ст. 239 ТК РФ.
Таким образом, направляйте работодателю письмо, ну а дальше уже по обстоятельствам.