我丈夫在我不知不觉中借的高利贷。借的高利贷不用于家庭开支。现在高利贷的人威胁要我还钱。我应该还给他吗？

放高利贷的人不通过正常的法律途径索要借款，却对你及家人进行恐吓威胁，这显然违法，建议报警处理。即使公安机关无法马上对这些人进行制裁或者处罚，但报警备案也是有帮助的，至少可以让放高利贷的人不敢轻易采取非法手段。
由于高利贷有主体分散，个人价值取向、风险控制无力等特点。高利贷活动不可避免地会引发一定的经济和社会问题。一些利率奇高的非法高利贷，经常出现借款人的收入增长不足以支付贷款利息的情况。
当贷款拖期或者还不上时，出借方经常会采用不合法的收债渠道，如雇佣讨债公司进行暴力催讨等。于是，因高利贷死亡。家破人散、远离他乡、无家可归的现象数不胜数。这些人已经被高利贷吸去了最后一滴血，往往都是身无分文，在外流浪，也成为了社会不安定的因素。
由于民间“高利贷”利率普遍高于银行基准利率，受利益驱动。一部分人便将自有资金用于民间借贷，对地方金融机构 (尤其是农村信用社)吸收存款造成很大压力。又由于其贷款机制灵活、便利，也在一定程度上造成对银行信贷的冲击。
另外由于民间“高利贷”多为私人之间的协议，大多没有信贷担保和抵押，而且对借款人的资信仅凭个人的主观判断，主观性和随意性很强，对风险的产生也无从控制，因此隐藏了极大的风险。
如果借款人不能归还贷款，对贷款人来说打击是巨大甚至是终身的。因而极易冲击正常的金融秩序。

建议尽快还款，直系亲属不会牵连

有证据的，可以起诉他