Ищу прогу, которая будет находить дубляжи ссылок Поделиться Опции

[gimrock]

Ищу программу, которая будет находить дубляжи, т.е. будет огромное колличество ссылок и необходимо, чтобы не было одинаковых. Например если будет:
http://www.chillyoislamyo.com/?p=199
http://www.chillyoislamyo.com/?p=220
http://www.chillyoislamyo.com/?p=199
1-ая и 3-яя дублируются - надо чтобы одна из них была удалена.

Помогите в поиске, очень нужно, или хоть что нибудь, что может упростить данную работу.

[Master866]

AndreW_RuleZ,
Исходный формат какой?

[gimrock]

Да в принципе прогу уже нашел, но еще договорился с человеком, чтобы он мне написал такую, только еще плюс несколько функций добавил, которые наврятле будут в какой-либо проге.

[Master866]

AndreW_RuleZ,
Я про то же, ее проще написать чем найти