Два CSV файла. Удаление дублей.

Тема в разделе "Встроенный редактор CSV файлов", создана пользователем napserious, 4 дек 2016.

  1. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Добрый день,
    есть два CSV файла,
    1 файл в который я сохраняю все сайты которые я когда то отпарсил,
    2 файл это ссылки которые надо отпарсить.
    Как через Csv редактор удалить из 2 файла дубликаты которые уже имеются в 1 файле?
     
    napserious, 4 дек 2016
    #1
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Запрашиваемой функции в редакторе CSV на данный момент нет.

    Если вам нужно исключить повторный парсинг одних и тех же ссылок, воспользуйтесь этим функционалом:
    2016-12-06_06-39-43.png

    С уважением к вам, Сергей.
     
    Root, 6 дек 2016
    #2
  3. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Данное поле общее как я понимаю ?
    Для всех проектов один и тот же файл?
     
    napserious, 6 дек 2016
    #3
  4. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Можно один текстовик подключить к нескольким проектам но парсить надо поочерелности чтоб один другого не блокировал к доступу к текстовику.
    Обычно используется текстовик для записи удачно спарсенных страниц для каждого проекта свой.
     
    kagorec, 6 дек 2016
    #4
    Root нравится это.
Similar Threads
  1. kagorec

    naRedup - удаление дублей строк в документе

    kagorec, 2 окт 2012, в разделе: Решение различных задач по парсингу
    Ответов:
    5
    Просмотров:
    6.548
    kagorec
    24 авг 2018
  2. babblosy

    Удаление дублей в повторяющихся границах.

    babblosy, 7 авг 2014, в разделе: Решение проблем с использованием программы
    Ответов:
    21
    Просмотров:
    2.874
    recrut
    4 дек 2021
  3. dddima

    Удаление дублей данных в ячейке CSV

    dddima, 10 июл 2015, в разделе: Решение различных задач по парсингу
    Ответов:
    3
    Просмотров:
    1.243
    Root
    10 июл 2015
  4. Diabet

    Удаление дублей в CSV

    Diabet, 23 окт 2015, в разделе: Встроенный редактор CSV файлов
    Ответов:
    2
    Просмотров:
    1.917
    Diabet
    23 окт 2015
  5. phederal

    Удаление дублей после сбора ссылок

    phederal, 23 ноя 2015, в разделе: Фильтры ссылок
    Ответов:
    4
    Просмотров:
    1.586
    phederal
    23 ноя 2015
Загрузка...

Поделиться этой страницей