IMDB (Фильмы)

[unreal666]

nostra
Сделай, плиз, опцию для удаления из начала названии фигни в кавычках вместе с последующим пробелом. Такая фигня есть для эпизодов многих сериалов.
Например, название эпизода из "Теория большого взрыва" при получении инфы о эпизоде (а не через получение инфы об эпизодах при получении инфы в самом сериале):

"The Big Bang Theory" The Pulled Groin Extrapolation

Вот "The Big Bang Theory" и надо удалять.

[unreal666]

И что-то плагин не полностью парсит результаты поиска. Например, добавляю сериал "Being Human". Мне нужен за 2011 год, на странице результатов поиска он есть, но плагин чисто из "Being Human" (т.е. с полным соответствием) выдает только за 2008 год. Хотя на странице результатов поиска в секции "Titles (Exact Matches)" точных совпадений 5 штук, из которых есть и за 2011 год.

[Chelseafan]

пожалуйста используйте для работы с кинопоиском Проксомитрон

Поставил Проксомитрон, установил, использовал предоставленный Вами конфигурационный файл, вроде все заработало для получение информации о фильмах с Кинопоиска, ранее не работающих. НО хотел узнать у всех ли при использовании Проксомитрона, при попытки получить инфу о фильме с IMDB , происходит циклическая загрузка и ничего не происходит? При отключении использования прокси в настройках PVD информация обновляется стабильно... Приходится переключатся между стандартными настройками программы и Проксомитроном для каждого отдельного фильма (В своей базе для каждого фильма использую инфу как с Кинопоиска, так и с IMDB). Может быть что-то можно сделать? Версия программы - 0.9.9.21.

[unreal666]

Chelseafan
Попробуй отключи в проксомитроне фильтры веб-страниц. Возможно на это влияет один из его веб-фильтров. Точнее можно узнать, посмотрев в журнал проксомитрона, какие фильтры фильтруют imdb.

[Chelseafan]

unreal666

При отключении фильтрации веб страниц, PVD качает инфу о фильмах так же как без Проксомитрона, снимал так же все галки с фильтраций - не помогло, потом поставил все обратно и несколько фильмов подряд обновило инфу с IMDB без проблем, возможно данный глюк встречается не всегда, или в не подходящее время пробовал и на сайте в тот момент были проблемы?

[unreal666]

Хрен знает. Фильтры веб-страниц на загрузку не влияют. Они только фильтруют веб-страницы. А вот фильтры HTTP-заголовков как раз нужны для случая с кинопоиском.
С зацикливанием надо смотреть именно лог журнала. Фиг знает, что там у тебя включено из заголовков.

[Chelseafan]

Хрен знает. Фильтры веб-страниц на загрузку не влияют. Они только фильтруют веб-страницы. А вот фильтры HTTP-заголовков как раз нужны для случая с кинопоиском.
С зацикливанием надо смотреть именно лог журнала. Фиг знает, что там у тебя включено из заголовков.

Вот опять проявилось, когда пополнял инфу о Зловещих мертвецах 3, лог бы привел, но он очень длинный а как тут сделать спойлер я к сожалению не нашел. При отключении Outgoing Header Filters в Proxomitron все прошло нормально, при удалении фильма и включении Outgoing Header Filters и попытке добавить информацию с IMDB опять возникает эффект цикла. Все таки приведу небольшой отрывок лога, который и повторяется:

+++GET 310+++
POST //register/login HTTP/1.0
Content-Type: application/x-www-form-urlencoded
Content-Length: 0
cookie: last_visit=2011-10-07+10%3A06%3A18;user_country=other;uu=BCYnadOQ-hSk3DLfT2T4Z09DPA_PtLqeQ4a25kZE7EkO_TuTNjvZa5wv4Hicv6Yxu_K3KIHgvPv_xIM2U73hKcJLcjceYMvoxxpvuljxiPq97uUdXOGHjCQg7b2IvRoJZ2PV_LReN8qxY4QPacRUVCSArC_sG3I7Y8bZ2Yx584gxAoOr6PitZnJ4foynYaOdjNyxDbE589F6VYCXV4aWXsnNDkwGpokweK-ymPOTz2WtNfZlthBlZsYT0_6a4rhMG2ll;cs=aymsr6jgtfSU30+NNS8oHQbF6J5Rk2ioFVfu3lT1D+hhM/utwaReyULTaJ5RM1uNEaB7rcLAK67y4Pv9ITB7rUGTaK720yi+UZNeCLEbaJ5RpV6JUZNonlGzaJ5Rk2jeEcMYrl;session-id=323-7966405-3553044;session-id-time=1475646405;
Host: www.imdb.com
Accept: text/html, */*
Referer: http://www.imdb.com//register/login
User-Agent: Mozilla/5.0 (; U;; en-US; rv:1.1) Gecko/20020826
Connection: Keep-Alive
Accept-Charset: windows-1251, cp-1251
Posting 0 bytes...

+++RESP 310+++
HTTP/1.0 200 OK
Date: Fri, 07 Oct 2011 06:06:28 GMT
Server: Server
Cneonction: close
Content-Type: text/html
Content-Encoding: gzip
Set-Cookie: cs=f5QEowGU+fTvXyzwUuyiSQaDaJ5Rk1+oAtA4nlKTyK1BM1uNEuA7HdKAGw0xM8uNYZNonmbF6N5xk2ioF1APzlIE7Y1m08gdcZNeCLEbaJ5RpV6JUZNonlGzaJ5Rk2jeEcMYrl;expires=Fri, 07 Oct 2011 07:00:00 GMT;path=/;domain=.imdb.com
P3P: policyref="http://i.imdb.com/images/p3p.xml",CP="CAO DSP LAW CUR ADM IVAo IVDo CONo OTPo OUR DELi PUBi OTRi BUS PHY ONL UNI PUR FIN COM NAV INT DEM CNT STA HEA PRE LOC GOV OTC "
Vary: User-Agent
Transfer-Encoding: chunked
+++CLOSE 310+++

И так далее GET311, затем RESP311, GET312....  Замечу что это происходит у меня не на всех фильмах....

[unreal666]

хм. В ответе ничего криминально не вижу.
Выложи более полный лог куда-нибудь.

ЗЫ.
У меня в запросе добавляется еще "Accept-Encoding: gzip, deflate" + User-Agent более полный + вместо HTTP/1.0 - HTTP/1.1.
Кстати, посмотри в проксомитроне настройку, связанную с HTTP/1.0 и отключи ее.

ЗЫ2.
Было бы это на моем компе - я бы разобрался, т.к. кроме заголовков еще бы проанализировал код этой зацикленную страницы, закаченной в кэш HandyCache.

[setget]

Попробуйте мои настройки проксомитрона! У меня все пашет. Залоудите вместо дефолтных!

User Agent в PVD такой: Mozilla/5.0 (Windows; U; Windows NT 5.0; en-EN; rv:1.6) Gecko/20040206 Firefox/1.0.1

Скрин проксо, чтобы показать где галки стоят.

[вложение удалено администратором]

[Chelseafan]

хм. В ответе ничего криминально не вижу.
Выложи более полный лог куда-нибудь.

ЗЫ.
У меня в запросе добавляется еще "Accept-Encoding: gzip, deflate" + User-Agent более полный + вместо HTTP/1.0 - HTTP/1.1.
Кстати, посмотри в проксомитроне настройку, связанную с HTTP/1.0 и отключи ее.

ЗЫ2.
Было бы это на моем компе - я бы разобрался, т.к. кроме заголовков еще бы проанализировал код этой зацикленную страницы, закаченной в кэш HandyCache.

Настройка HTTP/1.0 была отключена.

Попробуйте мои настройки проксомитрона! У меня все пашет. Залоудите вместо дефолтных!

User Agent в PVD такой: Mozilla/5.0 (Windows; U; Windows NT 5.0; en-EN; rv:1.6) Gecko/20040206 Firefox/1.0.1

Скрин проксо, чтобы показать где галки стоят.

Попробовал - то же самое.

Методом тыка нашел в чем была проблема конкретно у меня: зайдя в Edit filters - Headers, надо было снять галку с настройки User-Agent:Hide OS (out) [ALX].



После чего все пошло в обоих направлениях на всех фильмах, ставя эту галку опять, происходит та же фигня, правда повторюсь далеко не на всех фильмах.

В целях эксперимента попросил бы у кого есть охота попробовать поставить там галку (если она не стоит) и добавить в свою базу любой видео файл прогнав его вначале через Кинопоиск под именем Зловещие мертвецы 3: Армия тьмы (один из проблемных фильмов (для первой и второй части все идет нормально и без плясок с настройками)), а затем попробовать добавить информацию через IMDB. Просто интересно повторится ли то же самое у кого-нибудь еще.

[unreal666]

То то у тебя такой обгрызанный User-Agent. Походу в зависимости от ОС, imdb возвращает немного разные страницы и это мешает PVD.

[nostra]

Кол-во голосов и парсин результатов поиска исправил

nostra
Сделай, плиз, опцию для удаления из начала названии фигни в кавычках вместе с последующим пробелом. Такая фигня есть для эпизодов многих сериалов.
Например, название эпизода из "Теория большого взрыва" при получении инфы о эпизоде (а не через получение инфы об эпизодах при получении инфы в самом сериале):

"The Big Bang Theory" The Pulled Groin Extrapolation

Вот "The Big Bang Theory" и надо удалять.

Не могу воспроизвести проблему

[unreal666]

Ну, например, этот эпизод - http://www.imdb.com/title/tt2057241/
При скачивании получается название эпизода - "The Big Bang Theory" The Pulled Groin Extrapolation .

ЗЫ.
Ты походу берешь эту инфу или из тега "<title>...</title>" или из "<meta name="title" ...>" или из "<meta property="og:title" ...>" ?

[nostra]

Натурально, пробовал именно этот эпизод и такого эффекта не обнаружил?! Зайди по ссылке http://www.imdb.com/title/tt2057241/ и пришли мне страницу, что у тебя загружается...

[unreal666]

nostra
скинул в ПМ ссылку на архив со страничкой.

ЗЫ.
Кстати, все время забываю. Убери для страницы http://www.imdb.com/register/login лишний слэш ( http://www.imdb.com//register/login ).