ffmpegはRPMForgeを使います。また、インストールするのはffmpeg-develにしておきます。

$ yum –enablerepo=rpmforge install ffmpeg-devel