在对催收非法债务罪进行辨别的过程中，需要注意以下几个关键因素：
首先，催收的对象必须是高利放贷以及其他违法金融活动所衍生出的非法债务；
其次，犯罪情节须达到了严重程度；
再者，实施催收的手段必须涉及到暴力、威胁、强制等方式，包括非法限制他人人身自由、非法侵入他人住所，亦或是实施恐怖威胁、频繁跟踪、肆意骚扰他人等行为。
只要催收行为符合以上任何一点，并且情节严重，便可被认定为催收非法债务罪。

《中华人民共和国刑法》第二百九十三条之一
有下列情形之一，催收高利放贷等产生的非法债务，情节严重的，处三年以下有期徒刑、拘役或者管制，并处或者单处罚金：
（一）使用暴力、胁迫方法的；
（二）限制他人人身自由或者侵入他人住宅的；
（三）恐吓、跟踪、骚扰他人的。