我在一家木门厂上班因家里有事回家，老板以打电话不接为由不要我在厂里做事，请问我能离厂不。