_ Git - youtube-dl/blob - youtube_dl/extractor/odnoklassniki.py

   1 # coding: utf-8
   2 from __future__ import unicode_literals
   3
   4 from .common import InfoExtractor
   5 from ..compat import compat_urllib_parse_unquote
   6 from ..utils import (
   7     unified_strdate,
   8     int_or_none,
   9     qualities,
  10     unescapeHTML,
  11 )
  12
  13
  14 class OdnoklassnikiIE(InfoExtractor):
  15     _VALID_URL = r'https?://(?:odnoklassniki|ok)\.ru/(?:video|web-api/video/moviePlayer)/(?P<id>[\d-]+)'
  16     _TESTS = [{
  17         # metadata in JSON
  18         'url': 'http://ok.ru/video/20079905452',
  19         'md5': '8e24ad2da6f387948e7a7d44eb8668fe',
  20         'info_dict': {
  21             'id': '20079905452',
  22             'ext': 'mp4',
  23             'title': 'Культура меняет нас (прекрасный ролик!))',
  24             'duration': 100,
  25             'uploader_id': '330537914540',
  26             'uploader': 'Виталий Добровольский',
  27             'like_count': int,
  28             'age_limit': 0,
  29         },
  30     }, {
  31         # metadataUrl
  32         'url': 'http://ok.ru/video/63567059965189-0',
  33         'md5': '9676cf86eff5391d35dea675d224e131',
  34         'info_dict': {
  35             'id': '63567059965189-0',
  36             'ext': 'mp4',
  37             'title': 'Девушка без комплексов ...',
  38             'duration': 191,
  39             'uploader_id': '534380003155',
  40             'uploader': 'Андрей Мещанинов',
  41             'like_count': int,
  42             'age_limit': 0,
  43         },
  44     }, {
  45         'url': 'http://ok.ru/web-api/video/moviePlayer/20079905452',
  46         'only_matching': True,
  47     }]
  48
  49     def _real_extract(self, url):
  50         video_id = self._match_id(url)
  51
  52         webpage = self._download_webpage(
  53             'http://ok.ru/video/%s' % video_id, video_id)
  54
  55         player = self._parse_json(
  56             unescapeHTML(self._search_regex(
  57                 r'data-attributes="([^"]+)"', webpage, 'player')),
  58             video_id)
  59
  60         flashvars = player['flashvars']
  61
  62         metadata = flashvars.get('metadata')
  63         if metadata:
  64             metadata = self._parse_json(metadata, video_id)
  65         else:
  66             metadata = self._download_json(
  67                 compat_urllib_parse_unquote(flashvars['metadataUrl']),
  68                 video_id, 'Downloading metadata JSON')
  69
  70         movie = metadata['movie']
  71         title = movie['title']
  72         thumbnail = movie.get('poster')
  73         duration = int_or_none(movie.get('duration'))
  74
  75         author = metadata.get('author', {})
  76         uploader_id = author.get('id')
  77         uploader = author.get('name')
  78
  79         upload_date = unified_strdate(self._html_search_meta(
  80             'ya:ovs:upload_date', webpage, 'upload date', default=None))
  81
  82         age_limit = None
  83         adult = self._html_search_meta(
  84             'ya:ovs:adult', webpage, 'age limit', default=None)
  85         if adult:
  86             age_limit = 18 if adult == 'true' else 0
  87
  88         like_count = int_or_none(metadata.get('likeCount'))
  89
  90         quality = qualities(('mobile', 'lowest', 'low', 'sd', 'hd'))
  91
  92         formats = [{
  93             'url': f['url'],
  94             'ext': 'mp4',
  95             'format_id': f['name'],
  96             'quality': quality(f['name']),
  97         } for f in metadata['videos']]
  98
  99         return {
 100             'id': video_id,
 101             'title': title,
 102             'thumbnail': thumbnail,
 103             'duration': duration,
 104             'upload_date': upload_date,
 105             'uploader': uploader,
 106             'uploader_id': uploader_id,
 107             'like_count': like_count,
 108             'age_limit': age_limit,
 109             'formats': formats,
 110         }