「振るい落とす」？

揺さぶって付いているものを落とす意ならそれでも構いませんが、基準に合わないものを選り分ける意味であれば「篩い落とす」が適切です。

「篩ふるい」は、粒の大小を分離するための網目状の道具のことです。