Просмотр поста

Есть одна задача пока решить не могу так как давно практики не было вот собственно сама задача
Есть парсер RSS лент новостей поставил на крон 3 парсера по 5 минут вот все спарсеные записи записываю на БД. Проблема в том что мне нужно отфильтровать дубликаты или написать запрос чтобы добавить его в крон чтоб с помощью запроса удалять все.