ник: osmor
двойники будут отсекаться в момент добавления данных их таблицы1 в таблицу2.
Данные "формируется" в интернете. Это результат работы поисковика по определенным критериям т.е. Html с разных страниц интернета, которые потом парсятся и на выходе получается некий текстовый файл, более или менее структурированный.
Этот файл дается на вход программе которую сейчас и вояю, весь контроль должен быть в этой программе.
добавление в общем-то и происходит в справочник.
Задачу я представил очень упрощенно, на самом деле полей конечно не одно, и добавление будет происходит не по одному полю, на самом деле в зависимости от данных в других полях, для каких-то строк данные не будут Case зависимыми, для каких-то условий возможны дубли, для каких-то "фраза" должна состоять из слов из другого справочника... в общем там все не просто 
, но жутко интересно 