]> git.bitcoin.ninja Git - youtube-dl/blob - youtube_dl/extractor/odnoklassniki.py
[dailymotion] Error spelling
[youtube-dl] / youtube_dl / extractor / odnoklassniki.py
1 # coding: utf-8
2 from __future__ import unicode_literals
3
4 from .common import InfoExtractor
5 from ..compat import compat_urllib_parse_unquote
6 from ..utils import (
7     ExtractorError,
8     unified_strdate,
9     int_or_none,
10     qualities,
11     unescapeHTML,
12 )
13
14
15 class OdnoklassnikiIE(InfoExtractor):
16     _VALID_URL = r'https?://(?:www\.)?(?:odnoklassniki|ok)\.ru/(?:video|web-api/video/moviePlayer)/(?P<id>[\d-]+)'
17     _TESTS = [{
18         # metadata in JSON
19         'url': 'http://ok.ru/video/20079905452',
20         'md5': '6ba728d85d60aa2e6dd37c9e70fdc6bc',
21         'info_dict': {
22             'id': '20079905452',
23             'ext': 'mp4',
24             'title': 'Культура меняет нас (прекрасный ролик!))',
25             'duration': 100,
26             'upload_date': '20141207',
27             'uploader_id': '330537914540',
28             'uploader': 'Виталий Добровольский',
29             'like_count': int,
30             'age_limit': 0,
31         },
32         'skip': 'Video has been blocked',
33     }, {
34         # metadataUrl
35         'url': 'http://ok.ru/video/63567059965189-0',
36         'md5': '9676cf86eff5391d35dea675d224e131',
37         'info_dict': {
38             'id': '63567059965189-0',
39             'ext': 'mp4',
40             'title': 'Девушка без комплексов ...',
41             'duration': 191,
42             'upload_date': '20150518',
43             'uploader_id': '534380003155',
44             'uploader': '☭ Андрей Мещанинов ☭',
45             'like_count': int,
46             'age_limit': 0,
47         },
48     }, {
49         # YouTube embed (metadataUrl, provider == USER_YOUTUBE)
50         'url': 'http://ok.ru/video/64211978996595-1',
51         'md5': '5d7475d428845cd2e13bae6f1a992278',
52         'info_dict': {
53             'id': '64211978996595-1',
54             'ext': 'mp4',
55             'title': 'Космическая среда от 26 августа 2015',
56             'description': 'md5:848eb8b85e5e3471a3a803dae1343ed0',
57             'duration': 440,
58             'upload_date': '20150826',
59             'uploader_id': '750099571',
60             'uploader': 'Алина П',
61             'age_limit': 0,
62         },
63     }, {
64         'url': 'http://ok.ru/web-api/video/moviePlayer/20079905452',
65         'only_matching': True,
66     }, {
67         'url': 'http://www.ok.ru/video/20648036891',
68         'only_matching': True,
69     }]
70
71     def _real_extract(self, url):
72         video_id = self._match_id(url)
73
74         webpage = self._download_webpage(
75             'http://ok.ru/video/%s' % video_id, video_id)
76
77         error = self._search_regex(
78             r'[^>]+class="vp_video_stub_txt"[^>]*>([^<]+)<',
79             webpage, 'error', default=None)
80         if error:
81             raise ExtractorError(error, expected=True)
82
83         player = self._parse_json(
84             unescapeHTML(self._search_regex(
85                 r'data-options=(?P<quote>["\'])(?P<player>{.+?%s.+?})(?P=quote)' % video_id,
86                 webpage, 'player', group='player')),
87             video_id)
88
89         flashvars = player['flashvars']
90
91         metadata = flashvars.get('metadata')
92         if metadata:
93             metadata = self._parse_json(metadata, video_id)
94         else:
95             metadata = self._download_json(
96                 compat_urllib_parse_unquote(flashvars['metadataUrl']),
97                 video_id, 'Downloading metadata JSON')
98
99         movie = metadata['movie']
100         title = movie['title']
101         thumbnail = movie.get('poster')
102         duration = int_or_none(movie.get('duration'))
103
104         author = metadata.get('author', {})
105         uploader_id = author.get('id')
106         uploader = author.get('name')
107
108         upload_date = unified_strdate(self._html_search_meta(
109             'ya:ovs:upload_date', webpage, 'upload date', default=None))
110
111         age_limit = None
112         adult = self._html_search_meta(
113             'ya:ovs:adult', webpage, 'age limit', default=None)
114         if adult:
115             age_limit = 18 if adult == 'true' else 0
116
117         like_count = int_or_none(metadata.get('likeCount'))
118
119         info = {
120             'id': video_id,
121             'title': title,
122             'thumbnail': thumbnail,
123             'duration': duration,
124             'upload_date': upload_date,
125             'uploader': uploader,
126             'uploader_id': uploader_id,
127             'like_count': like_count,
128             'age_limit': age_limit,
129         }
130
131         if metadata.get('provider') == 'USER_YOUTUBE':
132             info.update({
133                 '_type': 'url_transparent',
134                 'url': movie['contentId'],
135             })
136             return info
137
138         quality = qualities(('mobile', 'lowest', 'low', 'sd', 'hd'))
139
140         formats = [{
141             'url': f['url'],
142             'ext': 'mp4',
143             'format_id': f['name'],
144             'quality': quality(f['name']),
145         } for f in metadata['videos']]
146         self._sort_formats(formats)
147
148         info['formats'] = formats
149         return info