Предложения по улучшению программы

Все-таки как ни пробовал, ничего не выходит, получается только нижнее подчеркивание, а надо тире. Может можно подправить?

 

Скиньте проект в ЛС или скайп, чтобы можно было посмотреть

 

Столкнулся с проблемой ресайза картинок... Скриптом обработать картинку не получается так как все пхп скрипты выполняются ДО сохранения картинки на диск. Предлагаю сделать функционал по обработке картинок, ресайз, кроп, водяные знаки и тд.

 

Да этой же прогой пользуюсь - очень удобно и ресайз масовый и обработка водяных знаков с картинок, все можно делать.

Хорошо бы макрос переводчика добавить гугловского - с какого на какой при загрузке переводить.

 

Гугловский макрос сейчас платный, вряд ли многих это устроит. Используйте другие переводчики, которые сейчас бесплатные. Большинство выдают скрипты API бесплатно.

 

Написал в личку.

 

А такой функционал можно добавить?

Ссылки недоступны для гостей

1) В "массовую обработку файлов" в поле "что добавить" возможность использовать макрос <CD_TITLE!>, который будет вставлять текст из поля "заголовок".
2) В поле "на указанную строку" возможность ставить не одно число. Например, 5-9, тогда вставка в каждую статью будет рандомной с 5 по 9 строку.

 

Добрый день. Хочу предложить сделать два вида вывода для спарсенного текста. К примеру, один идёт в формате csv (title,url,image) - сохраняем в ***.csv и второй файл выгрузки как обычно:

<CD_GRAN_1!>
<CD_GRAN_2!>
<CD_GRAN_3!>
<CD_GRAN_4!>
<CD_GRAN_5!>
<CD_GRAN_6!>
<CD_GRAN_7!>
<CD_GRAN_8!>
<CD_GRAN_9!>
<CD_GRAN_10!>
<CD_GRAN_11!>
<CD_GRAN_12!>

Чтобы не парсить два раза одно и то же для разных нужд. Было бы очень круто добавить такую функцию.

 

Говорил с автором. Сейчас есть более приоритетные задачи.
Если хотите реализовать эту, найдите убедительные аргументы, которые показали бы целесообразность того, чтобы удилеть ей время именно сейчас

 

В режиме "Предпросмотр элемента", когда переключаешься по ссылкам, часто нужно знать какое количество элементов спарсилось.

Если список длинный (у меня частенько больше 30-40 элементов) и не виден на экране, приходится на каждой ссылке скрол вниз опускать.

Предлагаю рядом со скролом добавить чекбокс "зафиксировать скрол" или "запомнить положение скрола", т.е. когда будем листать по страницам он будет на одном месте

 

Тут задача мне видится немного шыршэ. То есть, чаще всего при подобном просмотре, приходится отслеживать колонки. Значит, надо, чтобы запоминание происходило и по вертикали и по горизонтали. Так будет правильнее. Ещё лучше, если будет возможность выбора,- горизонталь, вертикаль, или оба.

Автору я преджложение передал. Ждём приговора
Приговор автора: будет сделано

 

Для парсинга Яндекс.Маркета со страниц такого вот типа Ссылки недоступны для гостей мне нужно перейти на страницу магазина и взять там какое нибудь значение. Для этого я в повторяющихся границах по исходной ЯМ странице использую макрос <GETMORECONTENT><URL="[VALUE]"><START="<title>"><STARTCOUNT="0"><END="</title>"><ENDCOUNT="0"><PARAMS=""></GETMORECONTENT>

Проблема в том, что, как я понимаю, все запросы этого макроса в рамках одного цикла обработки одной исходной страницы ЯМ выполняются либо одновременно либо последовательно но без пауз. В итоге, не смотря на то что в настройках у меня стоит 1 поток и пауза >5000мс, ЯМ меня банит.

Предлагаю добавить где нибудь либо в параметрах повторяющихся границ либо в макросах возможность задать паузу между запросами. Ну.е. либо доп чек бокс в параметрах, либо макрос <PAUSE> который можно будет поставить перед <GETMORECONTENT>

 

<GETMORECONTENT> тут ни при чём. Яндекс это нечто особенное и непредсказуемое, но, судя по вашему описанию, у вас проблема возникает не потому что нет пауз между циклами, а потому что запрос выполняется сразу же как только вы открываете страницу Яндекса. Всё решается проще, если спарсить сначала ссылки из Яндекса, а затем, другим проектом, уже гулять себе по нужным сайтам. Если я что-то неправильно понял, высылайте проект, посмотрим.

 

Да проект то простецкий: открывается страница ЯМ по типу приведенной выше, с неё повторяющимися границами берутся ссылки на сайты продавцов товаров (т.е. с одной страницы ЯМ таких ссылок берется 20шт). Проблема в том, что ссылки не прямые а редирекченые, такого вот типа Ссылки недоступны для гостей
Мне же нужны либо прямые ссылки (я уже понял что получить их можно только отправляя редиректы в PHP-скрипт и от туда получая значения, но пока этот способ для меня сложен) либо какие то данные с тех страниц продавцов (в частности - заголовки старниц). Для этого я макросом <GETMORECONTENT> лезу по редиретным ссылкам ЯМ и получаю нужные мне значения. Но при этом, как я понимаю, макрос срабатывает БЕЗ ПАУЗ 20 раз (по числу полученных повторяющимися границами редиректных ссылок), и у меня получается цикл: 5000мс перерыв - 20запросов без пауз - 5000мс перерыв - 20 запросов без пауз и т.д. Ну Яндекс меня за это и банит. Как вариант, конечно, можно делать все 2-мя проходами, в первый собирать редиректные ссылки, во второй по ним переходить, но это дополнительные телодвижения, хотелось бы иметь возможность делать всё в один проход...

 

Теперь стало понятней (надо было сразу показать правильную ссылку). Я передам автору задачу, посмотрим, что он скажет, возьмётся усмирять Яндекса или нет?

 

Денег предложить чтоли?

Разве мне одному пригодилась бы функция вывода спарсенного теста в два вида или в разные файлы. Можно ведь выводить разную инфу в разной раскладке, с разным шаблоном. В csv вообще просто. В прогу встроить функцю с галочкой - выводить в csv и меню с галочками возле <CD_GRAN_1!> и др.

С этой доп. функцией можно выводить как основной текст в один файл, так и в другой файл выводить только ключевики с каждой спарсенной страницы. Увеличивается КПД программы в несколько раз. Примеров использования этого симбиоза можно придумать огромное количество.

 

Предлагаю сделать функцию замены русских букв латинскими, пробелов знаком тире и удалять скобки, одинарные и двойные кавычки, слеши, спец символы, знаки препинания, а также переводить все буквы из границы парсинга, в нижний регистр.

Это нужно, чтобы после парсинга в шаблоне вывода, выводить красивые и оптимизированные под запрос человеко понятные урлы. Например текст из заголовка странички(первой границы парсинга) трансформируется и запишется в ячейку базы данных и станет урлом странички. Просто сейчас, приходится извращатся и выводить, например время установленное на компе вот пример

то что есть сейчас

new-muzon.net/4173-2012-06-29-16-47-28.html

то что может быть

new-muzon.net/4173-erotic-desires-volume-235-2012.html

 

Предлагаю добавить таймер - время сколько программа уже работает и хотя бы примерно - время завершения.




zilon, посмотри в доп. настройках перевод в транслит есть и по работе с чпу тоже были инструменты.

 

Уже сделано
- Тепер при предпросмотре результатов парсинга контента в CSV запоминается положение левой колонки и верхней строки (обновление по убедительной просьбе одного человека).

Сделается