本发明提供一种镁矿渣填料床磷回收系统，包括进水区及与进水区联通的反应器，反应器为内外双筒结构，内筒顶部开口，反应器包括位于内筒的结晶反应和捕集区、位于内筒下方的晶体分离区、晶体沉淀区及位于外筒上方的出水区，其中结晶反应和捕集区、晶体分离区和晶体沉淀区自上而下布置，进水区与所述结晶反应和捕集区通过可拆卸管道联通；结晶反应和捕集区内填充镁矿渣颗粒形成镁矿渣颗粒填料层，镁矿渣填料层底部设有筛网及振荡底座。本发明可以不必加入化学药剂，回收成本低，摆脱了磷酸铵镁结晶法回收磷对含镁药剂的依赖，不会引发二次化学污染和产生固体废物，富集的磷酸铵镁和磷吸附饱和镁矿渣颗粒能直接用作肥料，经济高效地从污水中回收磷。