灵活就业人员缴纳的养老保险在停止缴费后无法直接退还现金，但个人账户中的资金可以继承。

灵活就业人员参加的是城镇职工基本养老保险，与企业职工一样，按照国家规定的缴费基数和比例缴纳养老保险费。根据现行政策，养老保险个人账户中的资金属于个人所有，不会因为停止缴费而消失。

1. 个人账户资金的积累：在缴费期间，养老保险个人账户会按照缴费基数的一定比例（通常为8%）逐月积累资金。这部分资金属于个人所有，不会因为停止缴费而清零。

2. 停止缴费后个人账户的处理：如果灵活就业人员停止缴费，个人账户中的资金将继续保留，并按照国家规定的利率计算利息。这部分资金不会因为停止缴费而减少，也不会被挪作他用。

3. 养老金的计算与领取：养老金的计算与领取条件和缴费年限、缴费基数等因素有关。如果缴费年限不足，可能无法领取养老金，或者领取的养老金金额较低。但是，个人账户中的资金仍然属于个人所有，可以在退休后按照规定领取，或者在去世后由继承人继承。

4. 继承问题：如果灵活就业人员在退休前去世，个人账户中的资金可以由继承人继承。继承人可以按照规定办理继承手续，将个人账户中的资金提取出来。

总结：灵活就业人员缴纳的养老保险在停止缴费后无法直接退还现金，但个人账户中的资金可以保留并计算利息，或者在去世后由继承人继承。是否继续缴费需要根据个人的实际情况和需求来决定。如果有疑问，建议咨询当地社保部门或专业人士的意见。