Автор Тема: IMDB (Фильмы)  (Прочитано 108509 раз)

0 Пользователей и 1 Гость просматривают эту тему.

Оффлайн unreal666

  • Гуру
  • ****
  • Сообщений: 533
    • Сайт unreal666
Re: IMDB (Фильмы)
« Ответ #90 : 04 Октября 2011, 14:56:59 »
nostra
Сделай, плиз, опцию для удаления из начала названии фигни в кавычках вместе с последующим пробелом. Такая фигня есть для эпизодов многих сериалов.
Например, название эпизода из "Теория большого взрыва" при получении инфы о эпизоде (а не через получение инфы об эпизодах при получении инфы в самом сериале):
Цитировать
"The Big Bang Theory" The Pulled Groin Extrapolation
Вот "The Big Bang Theory" и надо удалять.
« Последнее редактирование: 04 Октября 2011, 14:59:26 от unreal666 »
PVD 1.0.2.7, Win 7 x64, Phenom II X6 1055T 3.5 GHz / 8 GiB / 5,4 TiB / HD 4870 1 GiB

Оффлайн unreal666

  • Гуру
  • ****
  • Сообщений: 533
    • Сайт unreal666
Re: IMDB (Фильмы)
« Ответ #91 : 04 Октября 2011, 17:34:14 »
И что-то плагин не полностью парсит результаты поиска. Например, добавляю сериал "Being Human". Мне нужен за 2011 год, на странице результатов поиска он есть, но плагин чисто из "Being Human" (т.е. с полным соответствием) выдает только за 2008 год. Хотя на странице результатов поиска в секции "Titles (Exact Matches)" точных совпадений 5 штук, из которых есть и за 2011 год.
PVD 1.0.2.7, Win 7 x64, Phenom II X6 1055T 3.5 GHz / 8 GiB / 5,4 TiB / HD 4870 1 GiB

Оффлайн Chelseafan

  • Новичок
  • *
  • Сообщений: 32
Re: IMDB (Фильмы)
« Ответ #92 : 06 Октября 2011, 17:03:42 »
пожалуйста используйте для работы с кинопоиском Проксомитрон

Поставил Проксомитрон, установил, использовал предоставленный Вами конфигурационный файл, вроде все заработало для получение информации о фильмах с Кинопоиска, ранее не работающих. НО хотел узнать у всех ли при использовании Проксомитрона, при попытки получить инфу о фильме с IMDB , происходит циклическая загрузка и ничего не происходит? При отключении использования прокси в настройках PVD информация обновляется стабильно... Приходится переключатся между стандартными настройками программы и Проксомитроном для каждого отдельного фильма (В своей базе для каждого фильма использую инфу как с Кинопоиска, так и с IMDB). Может быть что-то можно сделать? Версия программы - 0.9.9.21.

Оффлайн unreal666

  • Гуру
  • ****
  • Сообщений: 533
    • Сайт unreal666
Re: IMDB (Фильмы)
« Ответ #93 : 06 Октября 2011, 17:56:41 »
Chelseafan
Попробуй отключи в проксомитроне фильтры веб-страниц. Возможно на это влияет один из его веб-фильтров. Точнее можно узнать, посмотрев в журнал проксомитрона, какие фильтры фильтруют imdb.
PVD 1.0.2.7, Win 7 x64, Phenom II X6 1055T 3.5 GHz / 8 GiB / 5,4 TiB / HD 4870 1 GiB

Оффлайн Chelseafan

  • Новичок
  • *
  • Сообщений: 32
Re: IMDB (Фильмы)
« Ответ #94 : 06 Октября 2011, 18:14:13 »
unreal666

При отключении фильтрации веб страниц, PVD качает инфу о фильмах так же как без Проксомитрона, снимал так же все галки с фильтраций - не помогло, потом поставил все обратно и несколько фильмов подряд обновило инфу с IMDB без проблем, возможно данный глюк встречается не всегда, или в не подходящее время пробовал и на сайте в тот момент были проблемы?

Оффлайн unreal666

  • Гуру
  • ****
  • Сообщений: 533
    • Сайт unreal666
Re: IMDB (Фильмы)
« Ответ #95 : 06 Октября 2011, 19:21:41 »
Хрен знает. Фильтры веб-страниц на загрузку не влияют. Они только фильтруют веб-страницы. А вот фильтры HTTP-заголовков как раз нужны для случая с кинопоиском.
С зацикливанием надо смотреть именно лог журнала. Фиг знает, что там у тебя включено из заголовков.
PVD 1.0.2.7, Win 7 x64, Phenom II X6 1055T 3.5 GHz / 8 GiB / 5,4 TiB / HD 4870 1 GiB

Оффлайн Chelseafan

  • Новичок
  • *
  • Сообщений: 32
Re: IMDB (Фильмы)
« Ответ #96 : 07 Октября 2011, 09:19:01 »

Хрен знает. Фильтры веб-страниц на загрузку не влияют. Они только фильтруют веб-страницы. А вот фильтры HTTP-заголовков как раз нужны для случая с кинопоиском.
С зацикливанием надо смотреть именно лог журнала. Фиг знает, что там у тебя включено из заголовков.

Вот опять проявилось, когда пополнял инфу о Зловещих мертвецах 3, лог бы привел, но он очень длинный а как тут сделать спойлер я к сожалению не нашел. При отключении Outgoing Header Filters в Proxomitron все прошло нормально, при удалении фильма и включении Outgoing Header Filters и попытке добавить информацию с IMDB опять возникает эффект цикла. Все таки приведу небольшой отрывок лога, который и повторяется:

+++GET 310+++
POST //register/login HTTP/1.0
Content-Type: application/x-www-form-urlencoded
Content-Length: 0
cookie: last_visit=2011-10-07+10%3A06%3A18;user_country=other;uu=BCYnadOQ-hSk3DLfT2T4Z09DPA_PtLqeQ4a25kZE7EkO_TuTNjvZa5wv4Hicv6Yxu_K3KIHgvPv_xIM2U73hKcJLcjceYMvoxxpvuljxiPq97uUdXOGHjCQg7b2IvRoJZ2PV_LReN8qxY4QPacRUVCSArC_sG3I7Y8bZ2Yx584gxAoOr6PitZnJ4foynYaOdjNyxDbE589F6VYCXV4aWXsnNDkwGpokweK-ymPOTz2WtNfZlthBlZsYT0_6a4rhMG2ll;cs=aymsr6jgtfSU30+NNS8oHQbF6J5Rk2ioFVfu3lT1D+hhM/utwaReyULTaJ5RM1uNEaB7rcLAK67y4Pv9ITB7rUGTaK720yi+UZNeCLEbaJ5RpV6JUZNonlGzaJ5Rk2jeEcMYrl;session-id=323-7966405-3553044;session-id-time=1475646405;
Host: www.imdb.com
Accept: text/html, */*
Referer: http://www.imdb.com//register/login
User-Agent: Mozilla/5.0 (; U;; en-US; rv:1.1) Gecko/20020826
Connection: Keep-Alive
Accept-Charset: windows-1251, cp-1251
Posting 0 bytes...

+++RESP 310+++
HTTP/1.0 200 OK
Date: Fri, 07 Oct 2011 06:06:28 GMT
Server: Server
Cneonction: close
Content-Type: text/html
Content-Encoding: gzip
Set-Cookie: cs=f5QEowGU+fTvXyzwUuyiSQaDaJ5Rk1+oAtA4nlKTyK1BM1uNEuA7HdKAGw0xM8uNYZNonmbF6N5xk2ioF1APzlIE7Y1m08gdcZNeCLEbaJ5RpV6JUZNonlGzaJ5Rk2jeEcMYrl;expires=Fri, 07 Oct 2011 07:00:00 GMT;path=/;domain=.imdb.com
P3P: policyref="http://i.imdb.com/images/p3p.xml",CP="CAO DSP LAW CUR ADM IVAo IVDo CONo OTPo OUR DELi PUBi OTRi BUS PHY ONL UNI PUR FIN COM NAV INT DEM CNT STA HEA PRE LOC GOV OTC "
Vary: User-Agent
Transfer-Encoding: chunked
+++CLOSE 310+++

И так далее GET311, затем RESP311, GET312....  Замечу что это происходит у меня не на всех фильмах....

Оффлайн unreal666

  • Гуру
  • ****
  • Сообщений: 533
    • Сайт unreal666
Re: IMDB (Фильмы)
« Ответ #97 : 07 Октября 2011, 11:36:33 »
хм. В ответе ничего криминально не вижу.
Выложи более полный лог куда-нибудь.

ЗЫ.
У меня в запросе добавляется еще "Accept-Encoding: gzip, deflate" + User-Agent более полный + вместо HTTP/1.0 - HTTP/1.1.
Кстати, посмотри в проксомитроне настройку, связанную с HTTP/1.0 и отключи ее.

ЗЫ2.
Было бы это на моем компе - я бы разобрался, т.к. кроме заголовков еще бы проанализировал код этой зацикленную страницы, закаченной в кэш HandyCache.
PVD 1.0.2.7, Win 7 x64, Phenom II X6 1055T 3.5 GHz / 8 GiB / 5,4 TiB / HD 4870 1 GiB

Оффлайн setget

  • Постоялец
  • ***
  • Сообщений: 69
Re: IMDB (Фильмы)
« Ответ #98 : 07 Октября 2011, 11:40:26 »
Попробуйте мои настройки проксомитрона! У меня все пашет. Залоудите вместо дефолтных!

User Agent в PVD такой: Mozilla/5.0 (Windows; U; Windows NT 5.0; en-EN; rv:1.6) Gecko/20040206 Firefox/1.0.1

Скрин проксо, чтобы показать где галки стоят.

[вложение удалено администратором]

Оффлайн Chelseafan

  • Новичок
  • *
  • Сообщений: 32
Re: IMDB (Фильмы)
« Ответ #99 : 07 Октября 2011, 12:12:12 »
хм. В ответе ничего криминально не вижу.
Выложи более полный лог куда-нибудь.

ЗЫ.
У меня в запросе добавляется еще "Accept-Encoding: gzip, deflate" + User-Agent более полный + вместо HTTP/1.0 - HTTP/1.1.
Кстати, посмотри в проксомитроне настройку, связанную с HTTP/1.0 и отключи ее.

ЗЫ2.
Было бы это на моем компе - я бы разобрался, т.к. кроме заголовков еще бы проанализировал код этой зацикленную страницы, закаченной в кэш HandyCache.

Настройка HTTP/1.0 была отключена.

Попробуйте мои настройки проксомитрона! У меня все пашет. Залоудите вместо дефолтных!

User Agent в PVD такой: Mozilla/5.0 (Windows; U; Windows NT 5.0; en-EN; rv:1.6) Gecko/20040206 Firefox/1.0.1

Скрин проксо, чтобы показать где галки стоят.

Попробовал - то же самое.

Методом тыка нашел в чем была проблема конкретно у меня: зайдя в Edit filters - Headers, надо было снять галку с настройки User-Agent:Hide OS (out) [ALX].



После чего все пошло в обоих направлениях на всех фильмах, ставя эту галку опять, происходит та же фигня, правда повторюсь далеко не на всех фильмах.

В целях эксперимента попросил бы у кого есть охота попробовать поставить там галку (если она не стоит) и добавить в свою базу любой видео файл прогнав его вначале через Кинопоиск под именем Зловещие мертвецы 3: Армия тьмы (один из проблемных фильмов (для первой и второй части все идет нормально и без плясок с настройками)), а затем попробовать добавить информацию через IMDB. Просто интересно повторится ли то же самое у кого-нибудь еще.
« Последнее редактирование: 07 Октября 2011, 13:10:39 от Chelseafan »

Оффлайн unreal666

  • Гуру
  • ****
  • Сообщений: 533
    • Сайт unreal666
Re: IMDB (Фильмы)
« Ответ #100 : 07 Октября 2011, 13:54:46 »
То то у тебя такой обгрызанный User-Agent. Походу в зависимости от ОС, imdb возвращает немного разные страницы и это мешает PVD.
PVD 1.0.2.7, Win 7 x64, Phenom II X6 1055T 3.5 GHz / 8 GiB / 5,4 TiB / HD 4870 1 GiB

Оффлайн nostra

  • Администратор
  • *****
  • Сообщений: 2749
    • Personal Video Database
Re: IMDB (Фильмы)
« Ответ #101 : 08 Октября 2011, 00:09:03 »
Кол-во голосов и парсин результатов поиска исправил

nostra
Сделай, плиз, опцию для удаления из начала названии фигни в кавычках вместе с последующим пробелом. Такая фигня есть для эпизодов многих сериалов.
Например, название эпизода из "Теория большого взрыва" при получении инфы о эпизоде (а не через получение инфы об эпизодах при получении инфы в самом сериале):
Цитировать
"The Big Bang Theory" The Pulled Groin Extrapolation
Вот "The Big Bang Theory" и надо удалять.

Не могу воспроизвести проблему
Мы уже работаем над постановлением по углублению конструктивных мер, принятых в результате консолидации

Оффлайн unreal666

  • Гуру
  • ****
  • Сообщений: 533
    • Сайт unreal666
Re: IMDB (Фильмы)
« Ответ #102 : 08 Октября 2011, 05:49:05 »
Ну, например, этот эпизод - http://www.imdb.com/title/tt2057241/
При скачивании получается название эпизода - "The Big Bang Theory" The Pulled Groin Extrapolation .

ЗЫ.
Ты походу берешь эту инфу или из тега "<title>...</title>" или из "<meta name="title" ...>" или из "<meta property="og:title" ...>" ?
« Последнее редактирование: 08 Октября 2011, 05:50:55 от unreal666 »
PVD 1.0.2.7, Win 7 x64, Phenom II X6 1055T 3.5 GHz / 8 GiB / 5,4 TiB / HD 4870 1 GiB

Оффлайн nostra

  • Администратор
  • *****
  • Сообщений: 2749
    • Personal Video Database
Re: IMDB (Фильмы)
« Ответ #103 : 08 Октября 2011, 12:07:39 »
Натурально, пробовал именно этот эпизод и такого эффекта не обнаружил?! Зайди по ссылке http://www.imdb.com/title/tt2057241/ и пришли мне страницу, что у тебя загружается...
Мы уже работаем над постановлением по углублению конструктивных мер, принятых в результате консолидации

Оффлайн unreal666

  • Гуру
  • ****
  • Сообщений: 533
    • Сайт unreal666
Re: IMDB (Фильмы)
« Ответ #104 : 11 Октября 2011, 17:10:00 »
nostra
скинул в ПМ ссылку на архив со страничкой.

ЗЫ.
Кстати, все время забываю. Убери для страницы http://www.imdb.com/register/login лишний слэш ( http://www.imdb.com//register/login ).
PVD 1.0.2.7, Win 7 x64, Phenom II X6 1055T 3.5 GHz / 8 GiB / 5,4 TiB / HD 4870 1 GiB

 

anything