有媒體報導稱，王世堅在中常會上主張不必排斥藍營修選罷法，「民眾不喜歡一天到晚罷免，反正四年做不好，不投他就好了」，無奈這番話遭到中常委圍剿，連與王世堅交好的綠委蔡易餘也忍不住開炮。
蔡易餘今與王世堅一同在立院受訪，蔡易於先是澄清，自己在中常會上是表達制度要有所堅持，「我砲管很小隻啦！不要隨便開炮，應該要更正一下。」
王世堅受訪時則表示，他在民進黨中常會中提出看法，認為應一次倒閣解散國會，或是不該罷免來罷免去、爭擾不休，社會應休養生息、不想看到政治一直動盪。
王世堅認為，台灣每兩年要碰到一次選舉，希望社會休養生息，不要一天到晚被政治選舉疲勞轟炸，「我看法是，很多認為民眾認為，我選給議員、立委、縣市長，選一次就是4年，並不是40年，他做不好，我忍一下，下次不選給他就好，除非他很壞、很惡劣，當然要罷免」。
王世堅也強調，他的意見是，總預算、罷免法應脫鉤，選罷法就讓國民黨去修，「他修得嚴，我們要罷免他困難，相對他們要罷免我們也困難」，他是希望總預算、罷免法不要綁在一起，「你們修選罷法我們不反對，那審預算部分應快點審查，這是我的看法，相信這個原則沒有違背黨原則及立場」。