神经衰弱患者与精神病人的婚姻是不被允许的。因为神经衰弱是一种心理疾病，而精神病则属于一种严重的精神障碍。

第一、从社会的角度来看，如果一个患有神经衰弱的人与一个精神病患者结婚，那么他们的生活将面临很多困难。由于这种病态的心理状态，他们可能会做出一些极端的行为来应对自己的情绪问题，这会给周围的人带来很大的困扰，并且也会影响到家庭和社会的稳定。

第二、从法律的角度来看，如果一个患有神经衰弱的人与一个精神病患者结婚，那么他们的婚姻关系也是无效的。根据相关法律规定，在精神健康方面存在重大缺陷或者无法控制自己行为的人是没有能力去维护自己的权益的。因此，这样的婚姻关系是不会得到法律的认可和支持的。

综上所述，无论是从个人还是社会的角度来看，都不应该鼓励或支持神经衰弱患者与精神病患者的婚姻。对于这种情况，建议双方都应该积极寻求专业的帮助，以便更好地处理自己的情感和心理健康问题。