Korta svaret är ja, det lönar sig med mer minne (8GB DDR3 är billigt nu för tiden).
Lite längre svaret är nja... OSX Mavericks har visat sig rätt segt på många äldre Macar, har själv en liknande iMac hemma som rullar fint medan min MacBook från samma år (plast-unibodyn) går rätt slött trots 8GB RAM. Att iMacen är rätt nyinstallerad och att MacBooken aldrig installerats om, bara uppdaterats och uppgraderats under årens lopp, kan spela in i det hela.
Det händer mycket med hårdvaran i iMac på 5 år, samtidigt kan lite RAM för sådär 500:- verkligen snabba upp det för dig. Så, det är som alltid en avvägningsfråga, om jag var du så skulle jag chansat på att uppgradera minnet först i alla fall, om det inte fungerar så kanske en formatering och ren nyinstallation hjälper. Som sista utväg, byta upp dig till nytt.