Keyhole Ver 1.23 + alsa
ソース無いから推測の域を出ないけど、パケットが寸詰まり
（数秒何も到着しないあと遅れて一気にドバーッと来）の時、
音声ストリームが収納されているバッファが空になっているのが原因で、
以降のパケットが到着しても映像ストリームしか回復しない問題が有るように見受ける。
取り合えず音声バッファ空になりかけたら、（有るのなら）続きが来るまで空の有効な音声データ流すようにならない？

まあ、原因は見当違いかもしれないけど、思い当たるのはそれぐらいなので。
--verboseとか、--debugとかのオプション無いの？