[openload] Fix extraction (closes #10408, closes #10727)
[youtube-dl] / ChangeLog
1 version <unreleased>
2
3 Extractors
4 * [openload] Fix extraction (#10408)
5 + [ustream] Support the new HLS streams (#10698)
6
7 version 2016.09.19
8
9 Extractors
10 + [crunchyroll] Check if already authenticated (#10700)
11 - [twitch:stream] Remove fallback to profile extraction when stream is offline
12 * [thisav] Improve title extraction (#10682)
13 * [vyborymos] Improve station info extraction
14
15
16 version 2016.09.18
17
18 Core
19 + Introduce manifest_url and fragments fields in formats dictionary for
20   fragmented media
21 + Provide manifest_url field for DASH segments, HLS and HDS
22 + Provide fragments field for DASH segments
23 * Rework DASH segments downloader to use fragments field
24 + Add helper method for Wowza Streaming Engine formats extraction
25
26 Extractors
27 + [vyborymos] Add extractor for vybory.mos.ru (#10692)
28 + [xfileshare] Add title regular expression for streamin.to (#10646)
29 + [globo:article] Add support for multiple videos (#10653)
30 + [thisav] Recognize HTML5 videos (#10447)
31 * [jwplatform] Improve JWPlayer detection
32 + [mangomolo] Add support for Mangomolo embeds
33 + [toutv] Add support for authentication (#10669)
34 * [franceinter] Fix upload date extraction
35 * [tv4] Fix HLS and HDS formats extraction (#10659)
36
37
38 version 2016.09.15
39
40 Core
41 * Improve _hidden_inputs
42 + Introduce improved explicit Adobe Pass support
43 + Add --ap-mso to provide multiple-system operator identifier
44 + Add --ap-username to provide MSO account username
45 + Add --ap-password to provide MSO account password
46 + Add --ap-list-mso to list all supported MSOs
47 + Add support for Rogers Cable multiple-system operator (#10606)
48
49 Extractors
50 * [crunchyroll] Fix authentication (#10655)
51 * [twitch] Fix API calls (#10654, #10660)
52 + [bellmedia] Add support for more Bell Media Television sites
53 * [franceinter] Fix extraction (#10538, #2105)
54 * [kuwo] Improve error detection (#10650)
55 + [go] Add support for free full episodes (#10439)
56 * [bilibili] Fix extraction for specific videos (#10647)
57 * [nhk] Fix extraction (#10633)
58 * [kaltura] Improve audio detection
59 * [kaltura] Skip chun format
60 + [vimeo:ondemand] Pass Referer along with embed URL (#10624)
61 + [nbc] Add support for NBC Olympics (#10361)
62
63
64 version 2016.09.11.1
65
66 Extractors
67 + [tube8] Extract categories and tags (#10579)
68 + [pornhub] Extract categories and tags (#10499)
69 * [openload] Temporary fix (#10408)
70 + [foxnews] Add support Fox News articles (#10598)
71 * [viafree] Improve video id extraction (#10615)
72 * [iwara] Fix extraction after relaunch (#10462, #3215)
73 + [tfo] Add extractor for tfo.org
74 * [lrt] Fix audio extraction (#10566)
75 * [9now] Fix extraction (#10561)
76 + [canalplus] Add support for c8.fr (#10577)
77 * [newgrounds] Fix uploader extraction (#10584)
78 + [polskieradio:category] Add support for category lists (#10576)
79 + [ketnet] Add extractor for ketnet.be (#10343)
80 + [canvas] Add support for een.be (#10605)
81 + [telequebec] Add extractor for telequebec.tv (#1999)
82 * [parliamentliveuk] Fix extraction (#9137)
83
84
85 version 2016.09.08
86
87 Extractors
88 + [jwplatform] Extract height from format label
89 + [yahoo] Extract Brightcove Legacy Studio embeds (#9345)
90 * [videomore] Fix extraction (#10592)
91 * [foxgay] Fix extraction (#10480)
92 + [rmcdecouverte] Add extractor for rmcdecouverte.bfmtv.com (#9709)
93 * [gamestar] Fix metadata extraction (#10479)
94 * [puls4] Fix extraction (#10583)
95 + [cctv] Add extractor for CCTV and CNTV (#8153)
96 + [lci] Add extractor for lci.fr (#10573)
97 + [wat] Extract DASH formats
98 + [viafree] Improve video id detection (#10569)
99 + [trutv] Add extractor for trutv.com (#10519)
100 + [nick] Add support for nickelodeon.nl (#10559)
101 + [abcotvs:clips] Add support for clips.abcotvs.com
102 + [abcotvs] Add support for ABC Owned Television Stations sites (#9551)
103 + [miaopai] Add extractor for miaopai.com (#10556)
104 * [gamestar] Fix metadata extraction (#10479)
105 + [bilibili] Add support for episodes (#10190)
106 + [tvnoe] Add extractor for tvnoe.cz (#10524)
107
108
109 version 2016.09.04.1
110
111 Core
112 * In DASH downloader if the first segment fails, abort the whole download
113   process to prevent throttling (#10497)
114 + Add support for --skip-unavailable-fragments and --fragment retries in
115   hlsnative downloader (#10165, #10448).
116 + Add support for --skip-unavailable-fragments in DASH downloader
117 + Introduce --skip-unavailable-fragments option for fragment based downloaders
118   that allows to skip fragments unavailable due to a HTTP error
119 * Fix extraction of video/audio entries with src attribute in
120   _parse_html5_media_entries (#10540)
121
122 Extractors
123 * [theplatform] Relax URL regular expression (#10546)
124 * [youtube:playlist] Extend URL regular expression
125 * [rottentomatoes] Delegate extraction to internetvideoarchive extractor
126 * [internetvideoarchive] Extract all formats
127 * [pornvoisines] Fix extraction (#10469)
128 * [rottentomatoes] Fix extraction (#10467)
129 * [espn] Extend URL regular expression (#10549)
130 * [vimple] Extend URL regular expression (#10547)
131 * [youtube:watchlater] Fix extraction (#10544)
132 * [youjizz] Fix extraction (#10437)
133 + [foxnews] Add support for FoxNews Insider (#10445)
134 + [fc2] Recognize Flash player URLs (#10512)
135
136
137 version 2016.09.03
138
139 Core
140 * Restore usage of NAME attribute from EXT-X-MEDIA tag for formats codes in
141   _extract_m3u8_formats (#10522)
142 * Handle semicolon in mimetype2ext
143
144 Extractors
145 + [youtube] Add support for rental videos' previews (#10532)
146 * [youtube:playlist] Fallback to video extraction for video/playlist URLs when
147   no playlist is actually served (#10537)
148 + [drtv] Add support for dr.dk/nyheder (#10536)
149 + [facebook:plugins:video] Add extractor (#10530)
150 + [go] Add extractor for *.go.com sites
151 * [adobepass] Check for authz_token expiration (#10527)
152 * [nytimes] improve extraction
153 * [thestar] Fix extraction (#10465)
154 * [glide] Fix extraction (#10478)
155 - [exfm] Remove extractor (#10482)
156 * [youporn] Fix categories and tags extraction (#10521)
157 + [curiositystream] Add extractor for app.curiositystream.com
158 - [thvideo] Remove extractor (#10464)
159 * [movingimage] Fix for the new site name (#10466)
160 + [cbs] Add support for once formats (#10515)
161 * [limelight] Skip ism snd duplicate manifests
162 + [porncom] Extract categories and tags (#10510)
163 + [facebook] Extract timestamp (#10508)
164 + [yahoo] Extract more formats
165
166
167 version 2016.08.31
168
169 Extractors
170 * [soundcloud] Fix URL regular expression to avoid clashes with sets (#10505)
171 * [bandcamp:album] Fix title extraction (#10455)
172 * [pyvideo] Fix extraction (#10468)
173 + [ctv] Add support for tsn.ca, bnn.ca and thecomedynetwork.ca (#10016)
174 * [9c9media] Extract more metadata
175 * [9c9media] Fix multiple stacks extraction (#10016)
176 * [adultswim] Improve video info extraction (#10492)
177 * [vodplatform] Improve embed regular expression
178 - [played] Remove extractor (#10470)
179 + [tbs] Add extractor for tbs.com and tntdrama.com (#10222)
180 + [cartoonnetwork] Add extractor for cartoonnetwork.com (#10110)
181 * [adultswim] Rework in terms of turner extractor
182 * [cnn] Rework in terms of turner extractor
183 * [nba] Rework in terms of turner extractor
184 + [turner] Add base extractor for Turner Broadcasting System based sites
185 * [bilibili] Fix extraction (#10375)
186 * [openload] Fix extraction (#10408)
187
188
189 version 2016.08.28
190
191 Core
192 + Add warning message that ffmpeg doesn't support SOCKS
193 * Improve thumbnail sorting
194 + Extract formats from #EXT-X-MEDIA tags in _extract_m3u8_formats
195 * Fill IV with leading zeros for IVs shorter than 16 octets in hlsnative
196 + Add ac-3 to the list of audio codecs in parse_codecs
197
198 Extractors
199 * [periscope:user] Fix extraction (#10453)
200 * [douyutv] Fix extraction (#10153, #10318, #10444)
201 + [nhk:vod] Add extractor for www3.nhk.or.jp on demand (#4437, #10424)
202 - [trutube] Remove extractor (#10438)
203 + [usanetwork] Add extractor for usanetwork.com
204 * [crackle] Fix extraction (#10333)
205 * [spankbang] Fix description and uploader extraction (#10339)
206 * [discoverygo] Detect cable provider restricted videos (#10425)
207 + [cbc] Add support for watch.cbc.ca
208 * [kickstarter] Silent the warning for og:description (#10415)
209 * [mtvservices:embedded] Fix extraction for the new 'edge' player (#10363)
210
211
212 version 2016.08.24.1
213
214 Extractors
215 + [pluralsight] Add support for subtitles (#9681)
216
217
218 version 2016.08.24
219
220 Extractors
221 * [youtube] Fix authentication (#10392)
222 * [openload] Fix extraction (#10408)
223 + [bravotv] Add support for Adobe Pass (#10407)
224 * [bravotv] Fix clip info extraction (#10407)
225 * [eagleplatform] Improve embedded videos detection (#10409)
226 * [awaan] Fix extraction
227 * [mtvservices:embedded] Update config URL
228 + [abc:iview] Add extractor (#6148)
229
230
231 version 2016.08.22
232
233 Core
234 * Improve formats and subtitles extension auto calculation
235 + Recognize full unit names in parse_filesize
236 + Add support for m3u8 manifests in HTML5 multimedia tags
237 * Fix octal/hexadecimal number detection in js_to_json
238
239 Extractors
240 + [ivi] Add support for 720p and 1080p
241 + [charlierose] Add new extractor (#10382)
242 * [1tv] Fix extraction (#9249)
243 * [twitch] Renew authentication
244 * [kaltura] Improve subtitles extension calculation
245 + [zingmp3] Add support for video clips
246 * [zingmp3] Fix extraction (#10041)
247 * [kaltura] Improve subtitles extraction (#10279)
248 * [cultureunplugged] Fix extraction (#10330)
249 + [cnn] Add support for money.cnn.com (#2797)
250 * [cbsnews] Fix extraction (#10362)
251 * [cbs] Fix extraction (#10393)
252 + [litv] Support 'promo' URLs (#10385)
253 * [snotr] Fix extraction (#10338)
254 * [n-tv.de] Fix extraction (#10331)
255 * [globo:article] Relax URL and video id regular expressions (#10379)
256
257
258 version 2016.08.19
259
260 Core
261 - Remove output template description from --help
262 * Recognize lowercase units in parse_filesize
263
264 Extractors
265 + [porncom] Add extractor for porn.com (#2251, #10251)
266 + [generic] Add support for DBTV embeds
267 * [vk:wallpost] Fix audio extraction for new site layout
268 * [vk] Fix authentication
269 + [hgtvcom:show] Add extractor for hgtv.com shows (#10365)
270 + [discoverygo] Add support for another GO network sites
271
272
273 version 2016.08.17
274
275 Core
276 + Add _get_netrc_login_info
277
278 Extractors
279 * [mofosex] Extract all formats (#10335)
280 + [generic] Add support for vbox7 embeds
281 + [vbox7] Add support for embed URLs
282 + [viafree] Add extractor (#10358)
283 + [mtg] Add support for viafree URLs (#10358)
284 * [theplatform] Extract all subtitles per language
285 + [xvideos] Fix HLS extraction (#10356)
286 + [amcnetworks] Add extractor
287 + [bbc:playlist] Add support for pagination (#10349)
288 + [fxnetworks] Add extractor (#9462)
289 * [cbslocal] Fix extraction for SendtoNews-based videos
290 * [sendtonews] Fix extraction
291 * [jwplatform] Extract video id from JWPlayer data
292 - [zippcast] Remove extractor (#10332)
293 + [viceland] Add extractor (#8799)
294 + [adobepass] Add base extractor for Adobe Pass Authentication
295 * [life:embed] Improve extraction
296 * [vgtv] Detect geo restricted videos (#10348)
297 + [uplynk] Add extractor
298 * [xiami] Fix extraction (#10342)
299
300
301 version 2016.08.13
302
303 Core
304 * Show progress for curl external downloader
305 * Forward more options to curl external downloader
306
307 Extractors
308 * [pbs] Fix description extraction
309 * [franceculture] Fix extraction (#10324)
310 * [pornotube] Fix extraction (#10322)
311 * [4tube] Fix metadata extraction (#10321)
312 * [imgur] Fix width and height extraction (#10325)
313 * [expotv] Improve extraction
314 + [vbox7] Fix extraction (#10309)
315 - [tapely] Remove extractor (#10323)
316 * [muenchentv] Fix extraction (#10313)
317 + [24video] Add support for .me and .xxx TLDs
318 * [24video] Fix comment count extraction
319 * [sunporno] Add support for embed URLs
320 * [sunporno] Fix metadata extraction (#10316)
321 + [hgtv] Add extractor for hgtv.ca (#3999)
322 - [pbs] Remove request to unavailable API
323 + [pbs] Add support for high quality HTTP formats
324 + [crunchyroll] Add support for HLS formats (#10301)
325
326
327 version 2016.08.12
328
329 Core
330 * Subtitles are now written as is. Newline conversions are disabled. (#10268)
331 + Recognize more formats in unified_timestamp
332
333 Extractors
334 - [goldenmoustache] Remove extractor (#10298)
335 * [drtuber] Improve title extraction
336 * [drtuber] Make dislike count optional (#10297)
337 * [chirbit] Fix extraction (#10296)
338 * [francetvinfo] Relax URL regular expression
339 * [rtlnl] Relax URL regular expression (#10282)
340 * [formula1] Relax URL regular expression (#10283)
341 * [wat] Improve extraction (#10281)
342 * [ctsnews] Fix extraction
343
344
345 version 2016.08.10
346
347 Core
348 * Make --metadata-from-title non fatal when title does not match the pattern
349 * Introduce options for randomized sleep before each download
350   --min-sleep-interval and --max-sleep-interval (#9930)
351 * Respect default in _search_json_ld
352
353 Extractors
354 + [uol] Add extractor for uol.com.br (#4263)
355 * [rbmaradio] Fix extraction and extract all formats (#10242)
356 + [sonyliv] Add extractor for sonyliv.com (#10258)
357 * [aparat] Fix extraction
358 * [cwtv] Extract HTTP formats
359 + [rozhlas] Add extractor for prehravac.rozhlas.cz (#10253)
360 * [kuwo:singer] Fix extraction
361
362
363 version 2016.08.07
364
365 Core
366 + Add support for TV Parental Guidelines ratings in parse_age_limit
367 + Add decode_png (#9706)
368 + Add support for partOfTVSeries in JSON-LD
369 * Lower master M3U8 manifest preference for better format sorting
370
371 Extractors
372 + [discoverygo] Add extractor (#10245)
373 * [flipagram] Make JSON-LD extraction non fatal
374 * [generic] Make JSON-LD extraction non fatal
375 + [bbc] Add support for morph embeds (#10239)
376 * [tnaflixnetworkbase] Improve title extraction
377 * [tnaflix] Fix metadata extraction (#10249)
378 * [fox] Fix theplatform release URL query
379 * [openload] Fix extraction (#9706)
380 * [bbc] Skip duplicate manifest URLs
381 * [bbc] Improve format code
382 + [bbc] Add support for DASH and F4M
383 * [bbc] Improve format sorting and listing
384 * [bbc] Improve playlist extraction
385 + [pokemon] Add extractor (#10093)
386 + [condenast] Add fallback scenario for video info extraction
387
388
389 version 2016.08.06
390
391 Core
392 * Add support for JSON-LD root list entries (#10203)
393 * Improve unified_timestamp
394 * Lower preference of RTSP formats in generic sorting
395 + Add support for multiple properties in _og_search_property
396 * Improve password hiding from verbose output
397
398 Extractors
399 + [adultswim] Add support for trailers (#10235)
400 * [archiveorg] Improve extraction (#10219)
401 + [jwplatform] Add support for playlists
402 + [jwplatform] Add support for relative URLs
403 * [jwplatform] Improve audio detection
404 + [tvplay] Capture and output native error message
405 + [tvplay] Extract series metadata
406 + [tvplay] Add support for subtitles (#10194)
407 * [tvp] Improve extraction (#7799)
408 * [cbslocal] Fix timestamp parsing (#10213)
409 + [naver] Add support for subtitles (#8096)
410 * [naver] Improve extraction
411 * [condenast] Improve extraction
412 * [engadget] Relax URL regular expression
413 * [5min] Fix extraction
414 + [nationalgeographic] Add support for Episode Guide
415 + [kaltura] Add support for subtitles
416 * [kaltura] Optimize network requests
417 + [vodplatform] Add extractor for vod-platform.net
418 - [gamekings] Remove extractor
419 * [limelight] Extract HTTP formats
420 * [ntvru] Fix extraction
421 + [comedycentral] Re-add :tds and :thedailyshow shortnames
422
423
424 version 2016.08.01
425
426 Fixed/improved extractors
427 - [yandexmusic:track] Adapt to changes in track location JSON (#10193)
428 - [bloomberg] Support another form of player (#10187)
429 - [limelight] Skip DRM protected videos
430 - [safari] Relax regular expressions for URL matching (#10202)
431 - [cwtv] Add support for cwtvpr.com (#10196)
432
433
434 version 2016.07.30
435
436 Fixed/improved extractors
437 - [twitch:clips] Sort formats
438 - [tv2] Use m3u8_native
439 - [tv2:article] Fix video detection (#10188)
440 - rtve (#10076)
441 - [dailymotion:playlist] Optimize download archive processing (#10180)
442
443
444 version 2016.07.28
445
446 Fixed/improved extractors
447 - shared (#10170)
448 - soundcloud (#10179)
449 - twitch (#9767)
450
451
452 version 2016.07.26.2
453
454 Fixed/improved extractors
455 - smotri
456 - camdemy
457 - mtv
458 - comedycentral
459 - cmt
460 - cbc
461 - mgtv
462 - orf
463
464
465 version 2016.07.24
466
467 New extractors
468 - arkena (#8682)
469 - lcp (#8682)
470
471 Fixed/improved extractors
472 - facebook (#10151)
473 - dailymail
474 - telegraaf
475 - dcn
476 - onet
477 - tvp
478
479 Miscellaneous
480 - Support $Time$ in DASH manifests
481
482
483 version 2016.07.22
484
485 New extractors
486 - odatv (#9285)
487
488 Fixed/improved extractors
489 - bbc
490 - youjizz (#10131)
491 - youtube (#10140)
492 - pornhub (#10138)
493 - eporner (#10139)
494
495
496 version 2016.07.17
497
498 New extractors
499 - nintendo (#9986)
500 - streamable (#9122)
501
502 Fixed/improved extractors
503 - ard (#10095)
504 - mtv
505 - comedycentral (#10101)
506 - viki (#10098)
507 - spike (#10106)
508
509 Miscellaneous
510 - Improved twitter player detection (#10090)
511
512
513 version 2016.07.16
514
515 New extractors
516 - ninenow (#5181)
517
518 Fixed/improved extractors
519 - rtve (#10076)
520 - brightcove
521 - 3qsdn
522 - syfy (#9087, #3820, #2388)
523 - youtube (#10083)
524
525 Miscellaneous
526 - Fix subtitle embedding for video-only and audio-only files (#10081)
527
528
529 version 2016.07.13
530
531 New extractors
532 - rudo
533
534 Fixed/improved extractors
535 - biobiochiletv
536 - tvplay
537 - dbtv
538 - brightcove
539 - tmz
540 - youtube (#10059)
541 - shahid (#10062)
542 - vk
543 - ellentv (#10067)
544
545
546 version 2016.07.11
547
548 New Extractors
549 - roosterteeth (#9864)
550
551 Fixed/improved extractors
552 - miomio (#9605)
553 - vuclip
554 - youtube
555 - vidzi (#10058)
556
557
558 version 2016.07.09.2
559
560 Fixed/improved extractors
561 - vimeo (#1638)
562 - facebook (#10048)
563 - lynda (#10047)
564 - animeondemand
565
566 Fixed/improved features
567 - Embedding subtitles no longer throws an error with problematic inputs (#9063)
568
569
570 version 2016.07.09.1
571
572 Fixed/improved extractors
573 - youtube
574 - ard
575 - srmediatek (#9373)
576
577
578 version 2016.07.09
579
580 New extractors
581 - Flipagram (#9898)
582
583 Fixed/improved extractors
584 - telecinco
585 - toutv
586 - radiocanada
587 - tweakers (#9516)
588 - lynda
589 - nick (#7542)
590 - polskieradio (#10028)
591 - le
592 - facebook (#9851)
593 - mgtv
594 - animeondemand (#10031)
595
596 Fixed/improved features
597 - `--postprocessor-args` and `--downloader-args` now accepts non-ASCII inputs
598   on non-Windows systems
599
600
601 version 2016.07.07
602
603 New extractors
604 - kamcord (#10001)
605
606 Fixed/improved extractors
607 - spiegel (#10018)
608 - metacafe (#8539, #3253)
609 - onet (#9950)
610 - francetv (#9955)
611 - brightcove (#9965)
612 - daum (#9972)
613
614
615 version 2016.07.06
616
617 Fixed/improved extractors
618 - youtube (#10007, #10009)
619 - xuite
620 - stitcher
621 - spiegel
622 - slideshare
623 - sandia
624 - rtvnh
625 - prosiebensat1
626 - onionstudios
627
628
629 version 2016.07.05
630
631 Fixed/improved extractors
632 - brightcove
633 - yahoo (#9995)
634 - pornhub (#9997)
635 - iqiyi
636 - kaltura (#5557)
637 - la7
638 - Changed features
639 - Rename --cn-verfication-proxy to --geo-verification-proxy
640 Miscellaneous
641 - Add script for displaying downloads statistics
642
643
644 version 2016.07.03.1
645
646 Fixed/improved extractors
647 - theplatform
648 - aenetworks
649 - nationalgeographic
650 - hrti (#9482)
651 - facebook (#5701)
652 - buzzfeed (#5701)
653 - rai (#8617, #9157, #9232, #8552, #8551)
654 - nationalgeographic (#9991)
655 - iqiyi
656
657
658 version 2016.07.03
659
660 New extractors
661 - hrti (#9482)
662
663 Fixed/improved extractors
664 - vk (#9981)
665 - facebook (#9938)
666 - xtube (#9953, #9961)
667
668
669 version 2016.07.02
670
671 New extractors
672 - fusion (#9958)
673
674 Fixed/improved extractors
675 - twitch (#9975)
676 - vine (#9970)
677 - periscope (#9967)
678 - pornhub (#8696)
679
680
681 version 2016.07.01
682
683 New extractors
684 - 9c9media
685 - ctvnews (#2156)
686 - ctv (#4077)
687
688 Fixed/Improved extractors
689 - rds
690 - meta (#8789)
691 - pornhub (#9964)
692 - sixplay (#2183)
693
694 New features
695 - Accept quoted strings across multiple lines (#9940)