是的，辣椒蟹在冬天如果不采取适当的保暖措施，可能会冻死。辣椒蟹体型小，对水中的盐度有一定的要求，通常用汽水来养。这种蟹在我国北方沿海地区有分布，通常生活在入海口。由于它们体型小，对环境的适应能力可能相对较弱，因此在寒冷的冬季，如果水温过低，它们可能会因为无法适应而死亡。

为了避免这种情况，建议在冬季为辣椒蟹提供适宜的生长温度，一般为20-30摄氏度。在冬季寒冷时，可能需要使用加热设备进行恒温养殖。此外，降低池内水位并促使辣椒蟹在池的中边沟两侧及塘底挖掘洞穴潜伏过冬，也是一种可以考虑的防寒措施。