ZebroidФорумПубличный разделПредложенияАрхивАвтовидео - каналы на RuTube (ролики конкретного автора)

Автовидео - каналы на RuTube (ролики конкретного автора)

22 октября 2010, 07:34
Зарегистрирован: 26 апреля 2010, 01:51
Можно ли сделать парсинг целого канала RuTube (то есть все ролики конкретного автора)?

Например, есть очень хорошие тематические каналы, но они на поддоменах:

http://souzmultfilm.rutube.ru/

Все ролики канала:

http://souzmultfilm.rutube.ru/movies

Для других видеосервисов тоже была бы полезной возможность парсинга всех роликов конкретного автора.



14 марта 2011, 22:00
Зарегистрирован: 26 апреля 2010, 01:51
Можно ли сделать опцию "все ролики конкретного автора" и "все ролики канала" для rutube?

Как выяснилось далеко не всегда названия содержат нужную инфу.

Пример: http://remsanura1961.rutube.ru/movies?view=full

Очень нужно!



15 марта 2011, 03:48
Зарегистрирован: 10 апреля 2012, 00:00
Ничего не понял. И ссылки вы не верные даёте. Программа не собирает базу роликов а потом осуществляет по ней поиск, программа использует поисковый движок на сайте, так что если даёте ссылки, то на формы поиска с нужными настройками, ибо к примеру поиска по каналам на Рутубе нету



15 марта 2011, 10:50
Зарегистрирован: 26 апреля 2010, 01:51
Ничего не понял. И ссылки вы не верные даёте. Программа не собирает базу роликов а потом осуществляет по ней поиск, программа использует поисковый движок на сайте, так что если даёте ссылки, то на формы поиска с нужными настройками, ибо к примеру поиска по каналам на Рутубе нету


В данном случае не нужно никакого поиска.

Нужно закачать все ролики конкретного автора независимо от названий и меток.

Ссылка как раз иллюстрирует пример всех роликов одного автора.

Либо я чего-то не понимаю, и можно будет поставить какую-нибудь '*' для того, чтобы скачать все ролики одного автора.



15 марта 2011, 11:09
Зарегистрирован: 10 апреля 2012, 00:00
[quote="admin":2tlth52x]Ничего не понял. И ссылки вы не верные даёте. Программа не собирает базу роликов а потом осуществляет по ней поиск, программа использует поисковый движок на сайте, так что если даёте ссылки, то на формы поиска с нужными настройками, ибо к примеру поиска по каналам на Рутубе нету


В данном случае не нужно никакого поиска.

Нужно закачать все ролики конкретного автора независимо от названий и меток.

Ссылка как раз иллюстрирует пример всех роликов одного автора.

Либо я чего-то не понимаю, и можно будет поставить какую-нибудь '*' для того, чтобы скачать все ролики одного автора.[/quote:2tlth52x]

Вот когда я увидел это предложение то подумал, что именно это вы хотите, потому и сказал, что к мелким оно не относится: принцип работы другой, как распределять я не знаю, куда вставлять ролики и как оформить поиск для таки роликов я тоже не знаю.



15 марта 2011, 13:40
Зарегистрирован: 26 апреля 2010, 01:51
принцип работы другой


1. Не очень понимаю какая разница подсовывать парсеру url с поиска или такого вида http://remsanura1961.rutube.ru/movies?view=full

Url сформировать по-моему элементарно:

http://[user_name].rutube.ru/movies?view=full

как распределять я не знаю


2. Как вариант все ролики автору в отдельную категория.

Названия этой категории = имени автора

куда вставлять ролики


3. Теже параметры, что и при поиске, только ключевые слова игнорируются, вместо них - имя автора.

как оформить поиск для таки роликов я тоже не знаю.


4. Поиск по роликам конкретного автора не нужен, то есть просто отпарсить все ролики одного автора по его нику/id и загнать в Зеброид.

На вход: стандартные параметры (вставка снизу/сверху, коды как и раньше) + имя автора.

На выход: все ролики в категорию с именем автора.

Там количество роликов для большинства авторов в районе 50-100, дальше уже вручную можно выкинуть левые.



15 марта 2011, 17:07
Зарегистрирован: 10 апреля 2012, 00:00
1. Не очень понимаю какая разница подсовывать парсеру url с поиска или такого вида http://remsanura1961.rutube.ru/movies?view=full

Url сформировать по-моему элементарно:

http://[user_name].rutube.ru/movies?view=full


Я не о том, то что проблем с урлом нету это ясно. Я говорил о том, что принцип работы совсем другой: сейчас берется название или метка статьи и к ней ищутся ролики, а как это организовывать в вашем варианте не понятно.

4. Поиск по роликам конкретного автора не нужен


http://min.us/mnxkwHwawF5dV



15 марта 2011, 17:28
Зарегистрирован: 26 апреля 2010, 01:51
[quote:395m07b3]1. Не очень понимаю какая разница подсовывать парсеру url с поиска или такого вида http://remsanura1961.rutube.ru/movies?view=full

Url сформировать по-моему элементарно:

http://[user_name].rutube.ru/movies?view=full


Я не о том, то что проблем с урлом нету это ясно. Я говорил о том, что принцип работы совсем другой: сейчас берется название или метка статьи и к ней ищутся ролики, а как это организовывать в вашем варианте не понятно.

[/quote:395m07b3]

Если выбирается ник/id юзера, то выбор ключевых слов/меток блокируется и игнорируется.



[quote:395m07b3]4. Поиск по роликам конкретного автора не нужен


http://min.us/mnxkwHwawF5dV[/quote:395m07b3]

Это уже реализовано и это тоже нужно.

А сейчас имеется в виду полная закачка роликов, как отдельный вариант для роликов конкретных авторов.

То есть это второй независимый вариант.



15 марта 2011, 17:36
Зарегистрирован: 10 апреля 2012, 00:00
Чтобы лучше понять в чем проблема, попытайтесь описать действия пользователя и программы в предложеном вами варианте: что и где выбирает и заполняет пользователь, как программа реагирует на эти настройки и т.д.



15 марта 2011, 18:59
Зарегистрирован: 26 апреля 2010, 01:51
1. Искать видео по:

Меткам

Заголовку

Маткам + заголовку

Имени пользователя (возможно только для RuTube)

2. Если выбирается последний вариант, то нужно ввести имя пользователя или его id.

3. После этого парсится канал пользователя.

4. Создается директория с именем пользователя в корне проекта.

5. В эту директорию добавляются напарсеннные ролики.