做宫腔镜手术第4天我直接去上班了要紧吗？

我在*完第一个孩子后就去医院上了节育环，今年我和我老公打算*个二胎，就去医院做宫腔镜手术把节育环取出来了。因为工作的原因，再加上我做完手术后也没有什么其他的不适，就在术后第四天就直接回公司上班了，同事们看到我都很惊讶，让我在家休息，不然对身体不好。所以我想问一下大家我这样做对身体要紧吗？