Apagar respostas normalmente não gera penalidade. No entanto:
Se a resposta estiver aceita, apenas moderadores podem apagar.
Se for considerado que conteúdo importante de alta qualidade foi removido injustamente pelo autor, os moderadores podem restaurá-lo. Entretanto, casos disso são bem raros e excepcionais.
Ou seja, apagar uma resposta sua que recebeu votos negativos não tem problema.
Quanto a apagar perguntas, você não pode em alguns casos:
Quando a pergunta tem ao menos uma resposta com votação positiva.
Quando a pergunta tem resposta aceita.
Quando a pergunta tem duas ou mais respostas.
Mais detalhes aqui.
Apagar suas próprias perguntas ou respostas com votação >= +3 te dá a medalha de bronze disciplinado. Apagar suas próprias perguntas ou respostas com votação <= -3, te dá a medalha de bronze pressão dos colegas. Entretanto, você só pode adquirir essas medalhas uma vez.
Apagar perguntas ou respostas suas em massa vai sinalizar os moderadores que algo está errado e eles podem suspender a sua conta por um dia ou uma semana para você se acalmar, esfriar a cabeça e conversar com eles sobre o que está errado. Isso também é útil no caso de alguém roubar a sua senha e começar a vandalizar as suas perguntas e respostas, os moderadores vão interromper a atividade assim que a perceberem.