为什么男人会突然“不硬”？

最近跟女朋友在一起的时候，有几次突然就“软”了，之前明明都好好的，前戏也很正常。我平时身体没啥大毛病，也不抽烟不喝酒，就是工作压力大点，熬夜多。网上查了查，有人说可能是心理紧张，也有人说是肾虚或者前列腺问题。我自己试过休息几天、减少熬夜，但好像还是时好时坏。现在挺焦虑的，越担心越不行，搞得都不敢主动了。想问问有经验的老哥或者医生，这种情况到底是怎么回事？是心理原因占大头，还是真得去医院查查？有没有什么具体的办法能改善？最好能说点实在的，别光讲大道理。