Дубли страниц товара в Ямаркете

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем tkm, 5 май 2013.

  1. tkm

    tkm Member Пользователи

    Регистрация:
    22 ноя 2011
    Сообщения:
    99
    Подскажите. Собираю ссылки страниц товара на ЯМ. И ссылки товара дублируются, т.е товар один, а ссылки разные и таких ссылок на него может быть от двух и до...
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Как это победить?

    В дополнение вопроса. Ниже примеры ссылок. Те что закачиваются на одно и то же число и есть дубли. У дублей одна совпадающая средняя часть. Как избавить от дублей и оставить только одну ссылку. Все равно какую.
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
     
    Последнее редактирование: 6 май 2013
    tkm, 5 май 2013
    #1
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Пораметр show-uid назначить в "Фильтре ссылок" чтоб удаляло
    [​IMG]
     
    kagorec, 6 май 2013
    #2
  3. tkm

    tkm Member Пользователи

    Регистрация:
    22 ноя 2011
    Сообщения:
    99
    Спасибо все получилось!!! :) :) :)
     
    tkm, 6 май 2013
    #3
  4. bowman

    bowman New Member Пользователи

    Регистрация:
    10 окт 2012
    Сообщения:
    10
    А можно поподробней об алгоритме работы этого show-uid?
     
    bowman, 6 май 2013
    #4
  5. tkm

    tkm Member Пользователи

    Регистрация:
    22 ноя 2011
    Сообщения:
    99
    Радость была несколько преждевременной. Теперь при такой системе фильтрации не все ссылки собирает со страницы. Например.

    Страница категории Ссылки недоступны для гостей

    фильтр ссылок

    1.jpg

    Результат

    2.jpg

    А реально должно быть 41.

    ?????
     
    Последнее редактирование: 6 май 2013
    tkm, 6 май 2013
    #5
  6. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Укажите фильтру критерии правильно
    Вместо того длинного неправильного усовия с двумя масками "*" (нежелательно использовать более одной маски в строке в фильтре ссылок)
     
    kagorec, 6 май 2013
    #6
Similar Threads
  1. abuse16

    Как удалить дубли при парсинге?

    abuse16, 13 мар 2012, в разделе: Разное
    Ответов:
    12
    Просмотров:
    5.933
    mur
    14 сен 2014
  2. alex11

    Убрать дубли

    alex11, 7 май 2013, в разделе: Разное
    Ответов:
    1
    Просмотров:
    2.031
    alex11
    7 май 2013
  3. pps88

    как проще исключить дубли?

    pps88, 15 фев 2015, в разделе: Шаблон вывода
    Ответов:
    6
    Просмотров:
    1.519
    kagorec
    26 фев 2015
  4. Russel20

    проверка на дубли

    Russel20, 31 мар 2015, в разделе: Встроенный редактор CSV файлов
    Ответов:
    1
    Просмотров:
    1.366
    Root
    31 мар 2015
  5. faqbill

    Дубли страниц по разным ссылкам

    faqbill, 16 ноя 2016, в разделе: Парсинг во вкладке "Ссылки"
    Ответов:
    2
    Просмотров:
    1.113
    Root
    20 ноя 2016
Загрузка...

Поделиться этой страницей