公司要我簽保密協定 - 過年

我在房仲業當助理,老闆要我簽保密協定
,而且上面寫不可洩露公司的買賣出租承租客戶資料
,如違約,要罰40萬
我剛上班,前一位小姐已經走了,並沒有交接,在整理文件時,透過筆蹟發現這個公司己經換過好多助理
而也發現公司很多重要資料不見,也有與老闆反應
但他大多都說一定有,但結果都是沒有,
所以感覺很害怕不敢簽,而老闆一直告訴我東西不見與簽保密協定是沒有關係的,但四十萬不是小數字
而勞工區是叫我不要簽,因為四十萬太多了,而且不見與洩密一樣要訴送
我有跟老闆說但老闆說營工局說錯了,公司東西不見與資料洩密不同
請問到底怎樣才是保護自己的
我想離職,他也不讓我走
Update:
謝謝小芳的方法
謝謝小貞的意見
我真的會怕那個老闆,雖然他說的好像都很有道理,但我真的覺得怪怪的
我跟那老闆說我真的不做了,他叫我明天要去上班,他要請人交接,那其它的事在談
其實我去工作一個星期了,他還沒有給我加入勞健保,他說叫我先做做看,但又要跟我要身份證影印本,說去工作都要交,但是他又不給我辦勞健保要身份證做什麼,他又說過年後要幫我加入,但我都要離職了