根据山东省人社厅的规定，灵活就业人员应参加社保，个人和单位应按照一定比例缴纳社保费。若由于个人原因或单位经济困难等原因，需要退保的，可以在规定时间内申请，经过审核后可获得相应退保数额。若在规定时间内未申请退保，社保费将无法退回，待退休后可领取相应养老金。需要注意的是，退保后将不再享受社保制度的各项福利待遇，且可能影响到将来的就业及生活保障。

因此，灵活就业人员应充分了解相关政策，合理规划自身生活和工作，做出符合个人实际情况的决策。