律师解答：
开设赌场罪都要退赃。开设赌场罪是指聚众、开设赌场、以为业的行为，对社会危害较大，应予严厉打击依法追究刑事责任。犯本罪的处五年以下有期徒刑、拘役或者管制，并处罚金；情节严重的处五年以上十年以下有期徒刑，并处罚金。
【法律依据】：
《中华人民共和国刑法》 第三百零三条 以营利为目的，聚众或者以为业的，处三年以下有期徒刑、拘役或者管制，并处罚金。开设赌场的，处五年以下有期徒刑、拘役或者管制，并处罚金；情节严重的，处五年以上十年以下有期徒刑，并处罚金。组织中华人民共和国公民参与国（境）外，数额巨大或者有其他严重情节的，依照前款的规定处罚。