You can say: "Je sais que c'est énervant" or "Je sais, c'est énervant" but you can't say it without a "," (which is translated by a waiting space when you speak)
You can also replace "Je sais" by "Je suis conscient - and then - QUE c'est énervant" or "En effet, c'est énervant"
énervant > ennuyant > agaçant > insupportable