Panka jest wychowankiem litewskiego klubu Dainava Alytus. Grał tam w latach 2000/02. Następnie przeniósł się do FC Vilnius. Rozegrał tam 35 spotkań, strzelając 5 bramek. Jego dobra gra zwróciła uwagę Rosjan i został on wypożyczony do moskiewskiego Lokomotiwu. Nie udało mu się jednak przebić do składu drużyny ze stolicy. Po nieudanym pobycie w Moskwie powrócił do Wilna.

W 2007 roku przeszedł do Vetry, a 29 lipca podpisał już kontrakt z łódzkim Widzewem. W jego barwach zadebiutował 14 września 2007 r. w przegranym 1:3 meczu z Legią Warszawa. Swoją pierwszą bramkę w Ekstraklasie strzelił 23 lutego 2008 r. w wygranym 4:3 meczu z Odrą Wodzisław.