资产评估的管理主要归 财政部门负责。具体来说，根据《中华人民共和国资产评估法》和《国有资产评估管理办法》，财政部为全国资产评估主管部门，负责审批管理、监督全国资产评估机构，并统一制定资产评估机构管理制度。各省、自治区、直辖市财政厅（局）则负责对本地区资产评估机构进行审批管理和监督。此外，评估行业还可以依法设立行业协会，实行自律管理，并接受有关评估行政管理部门的监督和社会监督。

对于国有资产评估，按照国有资产管理权限，由国有资产管理行政主管部门负责管理和监督。国有资产评估组织工作则按照占有单位的隶属关系，由行业主管部门负责。国有资产管理行政主管部门和行业主管部门不直接从事国有资产评估业务。

综合以上信息，可以明确资产评估的管理部门主要是财政部门，同时涉及国有资产评估时，国有资产管理行政主管部门和行业主管部门也承担相应的管理职责。