Предыдущая тема :: Следующая тема |
Автор |
Сообщение |
Diver
Зарегистрирован: 09.03.2008 Сообщения: 96
|
Добавлено: 2008-11-01 22:21 pm Заголовок сообщения: Сообщение о бане от парсеров |
|
|
Хочется такого, что если персоналии перестают скачиваться (например бан на кинопоиске) выдавалось бы соответствующая ошибка типа (Подозрение на бан с %parser_name%, смените ip, либо используйте прокси.) А то есть подозрения, что при подобном бане персоналии тупо не добавляются. |
|
Вернуться к началу |
|
</life>
Зарегистрирован: 15.03.2008 Сообщения: 32
|
Добавлено: 2008-11-03 14:04 pm Заголовок сообщения: |
|
|
Сорри за оффтоп, но всем думаю будет полезна информация.
1. Какова ваша активность на кинопоиске, озоне (он тоже банит?)? Я имею ввиду, например за раз сколько нужно спарсить что бы получить бан.
2. Как долго держится бан?
Сам пока не попадался. IP статический. |
|
Вернуться к началу |
|
Александр Ярославцев
Зарегистрирован: 04.03.2008 Сообщения: 15
|
Добавлено: 2008-11-03 17:04 pm Заголовок сообщения: |
|
|
Мы в среднем за раз выкладываем по 15-20 фильмов...было и 50 за раз выкладывали, ниче, никто не банил...да я даже когда забивал ленту кинопремьер, за раз заколошматил 70 фильмов...т.е. без остановки качал описания и постеры, и ниче...айпишку не забанило...IP тоже статический |
|
Вернуться к началу |
|
Diver
Зарегистрирован: 09.03.2008 Сообщения: 96
|
Добавлено: 2008-11-04 17:40 pm Заголовок сообщения: |
|
|
</life> писал(а): | Сорри за оффтоп, но всем думаю будет полезна информация.
1. Какова ваша активность на кинопоиске, озоне (он тоже банит?)? Я имею ввиду, например за раз сколько нужно спарсить что бы получить бан.
2. Как долго держится бан?
Сам пока не попадался. IP статический. |
Нас банит только кинопоиск. Год назад почти не банили, парсили по 50 фильмов за раз, теперь за 10 фильмов банят на следующий день.
Разбанивают иногда на следующий день, иногда через 2 недели. Заметили, что если после бана несколько раз залогиниться у них на сайте, то через день разбанивают. |
|
Вернуться к началу |
|
</life>
Зарегистрирован: 15.03.2008 Сообщения: 32
|
Добавлено: 2008-11-17 20:22 pm Заголовок сообщения: |
|
|
Отстой. Не парсил две недели, и тут решил, забанен сразу! Причём вся подсеть.
Обновился до посл версии, прокатило. |
|
Вернуться к началу |
|
Мика
Зарегистрирован: 22.10.2008 Сообщения: 42
|
Добавлено: 2008-11-18 08:28 am Заголовок сообщения: |
|
|
Меня тоже забанили. Пробовал авторизоваться - не помогло.
Не понял - как обновление LMS помогло ? |
|
Вернуться к началу |
|
Angel
Зарегистрирован: 29.02.2008 Сообщения: 79
|
Добавлено: 2008-11-18 09:03 am Заголовок сообщения: |
|
|
в обновлении исправлена причина бана на кинопоиске |
|
Вернуться к началу |
|
Мика
Зарегистрирован: 22.10.2008 Сообщения: 42
|
Добавлено: 2008-11-18 14:31 pm Заголовок сообщения: |
|
|
упс, не заметил, что вышло обновление |
|
Вернуться к началу |
|
phant0m4eg Phant0m
Зарегистрирован: 22.06.2008 Сообщения: 44
|
Добавлено: 2008-11-29 08:05 am Заголовок сообщения: |
|
|
Добавил за раз около 57 фильмов, в соотношении половина с озона, другая с кинопоиска, на кинопоиске забанили походу так как больше парсить от туда не хочет Видеотека обновлена до последней версии. У вас есть такие же проблемы или после обновления уже все Окей? |
|
Вернуться к началу |
|
Мика
Зарегистрирован: 22.10.2008 Сообщения: 42
|
Добавлено: 2008-12-01 08:01 am Заголовок сообщения: |
|
|
Меня после масштабного добавления Кинопоиск тоже забанил. Потом раз в сутки можно было 8-10 фильмов. Проблема решилась установкой прокси сервера. Потом на сайте Кинопоиска создал учетную запись и залогинился через прокси. |
|
Вернуться к началу |
|
|