Удаление одинаковых строк из документа при парсинге

Здравствуйте, подскажите как при парсинге удалять одинаковые строки в пределах одного документа. Может есть готовое решение?
Я в php не силён, но вот нашёл скрипт удаления одинаковых строк из файла:

Code:

<?php  
$arr1= file ('mix.txt');
$result = array_unique($arr1);
for ($i=0; $i<count($result); $i++)
{$text .= $result[$i] ;}
file_put_contents(mix.txt, '');
$out=fopen('mix.txt','w');
fwrite($out,"$text");
fclose($out);
?>

попытался переделать вот так:

Code:

<?php  
$arr1 = array($_POST["data"]);
$result = array_unique($arr1);
for ($i=0; $i<count($result); $i++)
{$text .= $result[$i] ;}
echo $text;
?>

т.е. вместо текста из файла, подставляется $_POST["data"] из CD, но почему-то на выходе, в CD, тот же самый не обработанный текст, то есть с повторами.

Сам шаблон вывода:

Code:

<PHP_SCRIPT=http://testphp.my/test.php[UTF-8]>data=[DATAENCODE]<CD_CYCLE_GRAN_ALL!>[/DATAENCODE]</PHP_SCRIPT>

где <CD_CYCLE_GRAN_ALL!> - список предложений получаемый при парсинге и некоторые из них повторяются, например:

а мне надо на выходе так:

 

Здравствуйте.

Давно есть готовый макрос:

С уважением к вам, Сергей...

 

Спасибо большое, это то что надо :yes:

 

Я правильно понимаю что этот макрос надо вводить в редактор шаблона вывода? То будет примерно так [DELDUP({br})]<CD_GRAN_1!>;<CD_GRAN_2!>[/DELDUP] или я ошибаюсь?

 

Если у вас строки с дублями содержатся в <CD_GRAN_1!>, то так:

Это же очевидно! =)

 

У меня почему-то при такой схеме макрос в документ тоже попадает и выглядит вот так: [DELDUP({br})]GA-110-1AER[/DELDUP]

 

Какая у вас версия программы? (меню - справка - о программе)

 

Версия 2.79

 

Обновитесь до последней версии и макрос заработает. На форуме стоит предупреждение, что ведется поддержка только последних версий программы, прошу не пренебрегать этим.

 

Подскажите, пожалуйста, где в CD найти описание макроса [DELDUP]? Весь CD перерыл и что-то не наткнулся.

 

Что именно вам непонятно из краткого описания работы этого макроса в дереве макросов шаблона вывода?

 

Вот в том-то и дело, что я не могу его найти в этом самом дереве. Все глаза сломал. Ткните носом, плиз.

 

Spoiler

 

Спасибо! А то реально глаза сломал. То, что там еще и поиск есть тоже увидел.