[aftonbladet] add extractor for aftonbladet.se
[youtube-dl] / youtube_dl / extractor / aftonbladet.py
1 # encoding: utf-8
2 from __future__ import unicode_literals
3
4 import datetime
5 import re
6
7 from .common import InfoExtractor
8
9
10 class AftonbladetIE(InfoExtractor):
11     _VALID_URL = r'^http://tv\.aftonbladet\.se/webbtv.+(?P<video_id>article\d+)\.ab$'
12     _TEST = {
13         'url': 'http://tv.aftonbladet.se/webbtv/nyheter/vetenskap/rymden/article36015.ab',
14         'info_dict': {
15             'id': 'article36015',
16             'ext': 'mp4',
17             'title': 'Vulkanutbrott i rymden - nu släpper NASA bilderna',
18             'description': 'Jupiters måne mest aktiv av alla himlakroppar',
19             'upload_date': '20140306',
20         },
21     }
22
23     def _real_extract(self, url):
24         mobj = re.search(self._VALID_URL, url)
25
26         video_id = mobj.group('video_id')
27         webpage = self._download_webpage(url, video_id)
28
29         # find internal video meta data
30         META_URL = 'http://aftonbladet-play.drlib.aptoma.no/video/%s.json'
31         internal_meta_id = self._html_search_regex(r'data-aptomaId="([\w\d]+)"', webpage, 'internal_meta_id')
32         internal_meta_url = META_URL % internal_meta_id
33         internal_meta_json = self._download_json(internal_meta_url, video_id, 'Downloading video meta data')
34
35         # find internal video formats
36         FORMATS_URL = 'http://aftonbladet-play.videodata.drvideo.aptoma.no/actions/video/?id=%s'
37         internal_video_id = internal_meta_json['videoId']
38         internal_formats_url = FORMATS_URL % internal_video_id
39         internal_formats_json = self._download_json(internal_formats_url, video_id, 'Downloading video formats')
40
41         self.report_extraction(video_id)
42         formats = []
43         for fmt in reversed(internal_formats_json['formats']['http']['pseudostreaming']['mp4']):
44             p = fmt['paths'][0]
45             formats.append({
46                 'url': 'http://%s:%d/%s/%s' % (p['address'], p['port'], p['path'], p['filename']),
47                 'ext': 'mp4',
48                 'width': fmt['width'],
49                 'height': fmt['height'],
50                 'tbr': fmt['bitrate'],
51                 'protocol': 'http',
52             })
53
54         timestamp = datetime.datetime.fromtimestamp(internal_meta_json['timePublished'])
55         upload_date = timestamp.strftime('%Y%m%d')
56
57         return [{
58             'id': video_id,
59             'title': internal_meta_json['title'],
60             'formats': formats,
61             'thumbnail': internal_meta_json['imageUrl'],
62             'description': internal_meta_json['shortPreamble'],
63             'upload_date': upload_date,
64             'duration': internal_meta_json['duration'],
65             'view_count': internal_meta_json['views'],
66         }]