JMF hat damit nichts zu tun.
Das wird viel zu CPU und Speicher lastig, kannst du vergessen (wenn es nicht um eine sehr sehr kleine Spielfläche geht).
Da du aber selbst zeichnest lässt es sich lösen:
Du musst alles aufzeichnen was du benötigst um die Szene zu rekonstruieren.