按照《排污费征收使用管理条例》的规定，征收排污费的对象是直接向环境排放污染物的单位和个体工商户。