Картинки на FTP

Discussion in 'Скачивание картинок и файлов' started by MoloT, Oct 13, 2014.

Page 2 of 2
  1. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    Для начала прочитать стоит справку Ссылки недоступны для гостей по заливке картинок и файлов по фтп.
    Где в примечании как раз написано:
    Такчто ограничиваемся только созданием подпапкой), например новостным сайтам делал автосоздания подпапок для общей папки по дате.
    ../images/ внутри создавались 2014-11-14 имена папок.
    п.с. Проверено месяцами, работает отлично, вполне достаточно.
     
    Last edited: Nov 14, 2014
    kagorec, Nov 14, 2014
    #21
  2. micol

    micol New Member Пользователи

    Joined:
    Feb 25, 2015
    Messages:
    7
    Подниму тему.

    Пара вопросов появилось по загрузке на FTP

    1) Можно ли доработать (или я не нашел) такой функционал: загрузка изображений на FTP по окончании парсинга ссылок (т.е. все сразу в конце а не в процессе парсинга - заметил что если отключить загрузку на FTP то скорость парсинга возрастает до 10 раз, FTP свой, сервер свой, узких мест нет 147%)

    2) Так же при загрузке картинок на FTP обнаружил такие странности в логе

    Code:
    Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71120735_7.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:52 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71120739_8.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121313_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:53 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71121315_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_3.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:54 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_4.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_5.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:55 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:56 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:56 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:56 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:56 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:56 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:56 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
Thu Jul 23 13:08:56 2015 1 xxx.yyy.zzz.xxx 0 /images/71120734_6.jpeg b _ i g real ftp 0 * i
    Как видно в процессе парсинга одна и так же картинка загружается на FTP по нескольку раз. Чем это может быть вызвано?

    Картинки забираются так:
    3 граница - ID продуктов
    5 теги img, из которых убираем ресайз путем поиска-замены
     
    micol, Jul 23, 2015
    #22
Page 2 of 2
Similar Threads
  1. Draghkon

    Как закачивать только новые картинки, не перезаписывая старые?

    Draghkon, Jul 12, 2013, in forum: Скачивание картинок и файлов
    Replies:
    3
    Views:
    2,044
    alamina.moon
    Jul 15, 2013
  2. wia

    Вставка картинки непосредственно в CSV! Срочно

    wia, Feb 10, 2014, in forum: Разное
    Replies:
    1
    Views:
    1,875
    Root
    Feb 10, 2014
  3. dimasmak

    Как сделать чтобы имя картинки в папке и имя картинки в файле были разные

    dimasmak, Apr 9, 2014, in forum: Скачивание картинок и файлов
    Replies:
    2
    Views:
    1,518
    dimasmak
    Apr 9, 2014
  4. Daseraf

    Яндекс картинки по ключевым словам

    Daseraf, Dec 15, 2015, in forum: Решения по парсингу популярных сайтов
    Replies:
    1
    Views:
    45,310
    MarioN
    Jun 17, 2018
  5. sergiu

    как спарсить картинки без водяных знаков

    sergiu, Nov 8, 2016, in forum: Решение различных задач по парсингу
    Replies:
    11
    Views:
    3,613
    Kreol
    Mar 8, 2018
Loading...

Share This Page