A、生石灰可做干燥剂,是利用了生石灰吸水的性质,需要通过化学变化才表现出来,是利用了其化学性质,故选项错误.B、氢气用作清洁燃料,是利用了氢气的可燃性,需要通过化学变化才表现出来,是利用了其化学性质,故选项错误.C、食醋用于清除水壶中的水垢,是利用了食醋与水垢能反应的性质,需要通过化学变化才表现出来,是利用了其化学性质,故选项错误.D、铝合金用于制作门窗框架,是利用了铝合金质轻、坚硬、颜色艳丽等性质,不需要发生化学变化就能表现出来,是利用了其物理性质,故选项正确.故选D.