客に脅迫されたからバイトすぐに辞めたいんだけど正当な理由だよな？

経緯
・パートのおばさん立ち読み常習犯を注意
→全く効かず
→代わりに〇〇君いってきてよ
→軽く注意
→立ち読み「俺は客だぞ」
→俺「ルールが守れないのであれば出てってください」(睨みつけながら)
→退店

・後日、おれがレジの日に「あの日のことは絶対に忘れないからな。なんらかの形で返すからな。」と言われる

シフトがあと3回残ってて無責任だけど
身の危険を感じるから今電話して辞めようと思ってる