どちらが言葉として正しいでしょうか？

正解は「空を見上げる」
「上空を見上げる」は話し言葉ではよく使われがちですが、漢字で書くと重複表現であることがよくわかります。