Что делать?

Психологически бороться, как же ещё.

Сложно представить, как это вобще может быть чувство вины без какого-либо действия. Так может быть, если Вы хотите думать, что не виноваты, но сами же в этом сомневаетесь. То есть подразумевается, что некоторое событие имело место быть. Если так — не отрицайте его, а разберитесь в ситуации, а не представляйте её в том свете, в котором Вам бы хотелось её видеть, раз так мучает совесть. Если же чувство возникает совсем на пустом месте и Вы в этом уверены, то вам нужно научиться контролировать свои эмоции. Если же не получится разобраться в ситуации самой, то побеседовать с психологом. Возможно специалист поможет Вам открыть глаза на истинную причину этого чувства.
В любом случае, оставлять всё как есть вариант не самый лучший.

Причины могут быть разнообразными, вплоть до психических травм в раннем возрасте. Обратитесь к специалисту.