我父亲参加民间称为“集会子”的一种攒钱活动，到了可以拿钱的时候，会主并没有把钱交给我父亲，而是给我父亲打了一张欠条，我父亲连钱都没见到。到现在已经好几年了，期间一直在讨要。会主一直不还，有时称我父亲曾经与她（会主）有暧昧关系为由拒绝还钱。涉案金额约有5万，对方是否属于违法，是否已构成诈骗罪？