>スクリプト見出すと全く進まなくて多聴にならないし、かといって見ないとけっこう聞き取れないから本当にこれで良いのか疑問に思ったりもする。

どういう意味? 字幕を見てわからないのでストップしてるってこと?
それだと、読めてないってことだろ。読めないものは聞き取れないよ。
文字におこしたスクリプトだと2倍くらい早く読める筈よ。全体が視野にはいるからね。
字幕なら完全に理解できるが、音声だけだと落とす部分がある場合にはリスニングを練習する。
字幕見ても理解できない箇所があるなら、リスニングはやめて、リーディングをして
語彙とか読む量を増やす。リスニングはリスニングをやっても伸びないよ。特にVOA specialとか無意味。