_ Git - youtube-dl/blob - youtube_dl/extractor/moniker.py

   1 # coding: utf-8
   2 from __future__ import unicode_literals
   3
   4 import os.path
   5 import re
   6
   7 from .common import InfoExtractor
   8 from ..compat import (
   9     compat_urllib_parse,
  10     compat_urllib_request,
  11 )
  12
  13
  14 class MonikerIE(InfoExtractor):
  15     IE_DESC = 'allmyvideos.net and vidspot.net'
  16     _VALID_URL = r'https?://(?:www\.)?(?:allmyvideos|vidspot)\.net/(?P<id>[a-zA-Z0-9_-]+)'
  17
  18     _TESTS = [{
  19         'url': 'http://allmyvideos.net/jih3nce3x6wn',
  20         'md5': '710883dee1bfc370ecf9fa6a89307c88',
  21         'info_dict': {
  22             'id': 'jih3nce3x6wn',
  23             'ext': 'mp4',
  24             'title': 'youtube-dl test video',
  25         },
  26     }, {
  27         'url': 'http://vidspot.net/l2ngsmhs8ci5',
  28         'md5': '710883dee1bfc370ecf9fa6a89307c88',
  29         'info_dict': {
  30             'id': 'l2ngsmhs8ci5',
  31             'ext': 'mp4',
  32             'title': 'youtube-dl test video',
  33         },
  34     }, {
  35         'url': 'https://www.vidspot.net/l2ngsmhs8ci5',
  36         'only_matching': True,
  37     }]
  38
  39     def _real_extract(self, url):
  40         video_id = self._match_id(url)
  41         orig_webpage = self._download_webpage(url, video_id)
  42
  43         fields = re.findall(r'type="hidden" name="(.+?)"\s* value="?(.+?)">', orig_webpage)
  44         data = dict(fields)
  45
  46         post = compat_urllib_parse.urlencode(data)
  47         headers = {
  48             b'Content-Type': b'application/x-www-form-urlencoded',
  49         }
  50         req = compat_urllib_request.Request(url, post, headers)
  51         webpage = self._download_webpage(
  52             req, video_id, note='Downloading video page ...')
  53
  54         title = os.path.splitext(data['fname'])[0]
  55
  56         # Could be several links with different quality
  57         links = re.findall(r'"file" : "?(.+?)",', webpage)
  58         # Assume the links are ordered in quality
  59         formats = [{
  60             'url': l,
  61             'quality': i,
  62         } for i, l in enumerate(links)]
  63         self._sort_formats(formats)
  64
  65         return {
  66             'id': video_id,
  67             'title': title,
  68             'formats': formats,
  69         }