用户的问题主要关注的是非法吸收公众存款罪中的“但书”部分，即在某些特定情况下，可能不构成该罪或可以减轻处罚的情况。作为资深律师，我将从以下几个方面进行详细的解析：
1. 情节显著轻微根据《刑法》第176条的规定，如果行为人的非法吸收公众存款的行为情节显著轻微，危害不大的，可以认为是犯罪情节轻微，依照规定免除刑事处罚。这主要是基于对社会危害程度的考量。
2. 主动退赃如果非法吸收公众存款后，行为人能够主动退还所吸收的资金，减少了受害者的损失，根据《刑法》第64条的规定，对于犯罪所得的一切财物，应当予以追缴或者责令退赔；对被害人的合法财产，应当及时返还。在此情况下，法院可能会酌情从轻处理。
3. 自首与立功根据《刑法》第67条和第68条的规定，如果行为人在案发后能主动投案自首，并如实供述自己的罪行，或者揭发他人犯罪行为，查证属实，构成立功的，可以从轻或者减轻处罚。
4. 单位犯罪中直接责任人员《刑法》第176条第三款规定：“单位犯前两款罪的，对单位判处罚金，并对其直接负责的主管人员和其他直接责任人员，依照第一款的规定处罚。”这意味着，在单位犯罪的情况下，如果是非直接责任人员，其法律责任可能会相对较轻。
5. 特殊主体在一些情况下，如金融机构工作人员违反国家规定，吸收客户资金不入账，数额巨大或者造成重大损失的，可能构成金融凭证诈骗罪而非非法吸收公众存款罪，这两者在量刑上有所不同。
总结：
非法吸收公众存款罪的但书部分主要体现在对情节轻微、积极退赃、自首立功、单位犯罪中的责任区分以及特殊主体的处理上。这些因素在具体案件中会结合实际情况，由法官综合判断是否适用从宽处理。每个案例都有其独特性，因此，任何具体的法律建议都应由具备资格的专业律师根据实际案情提供。
