ファン掃除用のブラシでいいのないかな？
綿棒だと太くて奥まで入らないし、歯ブラシだとファンの溝に上手く嵌まらない。