release 2016.09.18
[youtube-dl] / ChangeLog
1 version 2016.09.18
2
3 Core
4 + Introduce manifest_url and fragments fields in formats dictionary for
5   fragmented media
6 + Provide manifest_url field for DASH segments, HLS and HDS
7 + Provide fragments field for DASH segments
8 * Rework DASH segments downloader to use fragments field
9 + Add helper method for Wowza Streaming Engine formats extraction
10
11 Extractors
12 + [vyborymos] Add extractor for vybory.mos.ru (#10692)
13 + [xfileshare] Add title regular expression for streamin.to (#10646)
14 + [globo:article] Add support for multiple videos (#10653)
15 + [thisav] Recognize HTML5 videos (#10447)
16 * [jwplatform] Improve JWPlayer detection
17 + [mangomolo] Add support for Mangomolo embeds
18 + [toutv] Add support for authentication (#10669)
19 * [franceinter] Fix upload date extraction
20 * [tv4] Fix HLS and HDS formats extraction (#10659)
21
22
23 version 2016.09.15
24
25 Core
26 * Improve _hidden_inputs
27 + Introduce improved explicit Adobe Pass support
28 + Add --ap-mso to provide multiple-system operator identifier
29 + Add --ap-username to provide MSO account username
30 + Add --ap-password to provide MSO account password
31 + Add --ap-list-mso to list all supported MSOs
32 + Add support for Rogers Cable multiple-system operator (#10606)
33
34 Extractors
35 * [crunchyroll] Fix authentication (#10655)
36 * [twitch] Fix API calls (#10654, #10660)
37 + [bellmedia] Add support for more Bell Media Television sites
38 * [franceinter] Fix extraction (#10538, #2105)
39 * [kuwo] Improve error detection (#10650)
40 + [go] Add support for free full episodes (#10439)
41 * [bilibili] Fix extraction for specific videos (#10647)
42 * [nhk] Fix extraction (#10633)
43 * [kaltura] Improve audio detection
44 * [kaltura] Skip chun format
45 + [vimeo:ondemand] Pass Referer along with embed URL (#10624)
46 + [nbc] Add support for NBC Olympics (#10361)
47
48
49 version 2016.09.11.1
50
51 Extractors
52 + [tube8] Extract categories and tags (#10579)
53 + [pornhub] Extract categories and tags (#10499)
54 * [openload] Temporary fix (#10408)
55 + [foxnews] Add support Fox News articles (#10598)
56 * [viafree] Improve video id extraction (#10615)
57 * [iwara] Fix extraction after relaunch (#10462, #3215)
58 + [tfo] Add extractor for tfo.org
59 * [lrt] Fix audio extraction (#10566)
60 * [9now] Fix extraction (#10561)
61 + [canalplus] Add support for c8.fr (#10577)
62 * [newgrounds] Fix uploader extraction (#10584)
63 + [polskieradio:category] Add support for category lists (#10576)
64 + [ketnet] Add extractor for ketnet.be (#10343)
65 + [canvas] Add support for een.be (#10605)
66 + [telequebec] Add extractor for telequebec.tv (#1999)
67 * [parliamentliveuk] Fix extraction (#9137)
68
69
70 version 2016.09.08
71
72 Extractors
73 + [jwplatform] Extract height from format label
74 + [yahoo] Extract Brightcove Legacy Studio embeds (#9345)
75 * [videomore] Fix extraction (#10592)
76 * [foxgay] Fix extraction (#10480)
77 + [rmcdecouverte] Add extractor for rmcdecouverte.bfmtv.com (#9709)
78 * [gamestar] Fix metadata extraction (#10479)
79 * [puls4] Fix extraction (#10583)
80 + [cctv] Add extractor for CCTV and CNTV (#8153)
81 + [lci] Add extractor for lci.fr (#10573)
82 + [wat] Extract DASH formats
83 + [viafree] Improve video id detection (#10569)
84 + [trutv] Add extractor for trutv.com (#10519)
85 + [nick] Add support for nickelodeon.nl (#10559)
86 + [abcotvs:clips] Add support for clips.abcotvs.com
87 + [abcotvs] Add support for ABC Owned Television Stations sites (#9551)
88 + [miaopai] Add extractor for miaopai.com (#10556)
89 * [gamestar] Fix metadata extraction (#10479)
90 + [bilibili] Add support for episodes (#10190)
91 + [tvnoe] Add extractor for tvnoe.cz (#10524)
92
93
94 version 2016.09.04.1
95
96 Core
97 * In DASH downloader if the first segment fails, abort the whole download
98   process to prevent throttling (#10497)
99 + Add support for --skip-unavailable-fragments and --fragment retries in
100   hlsnative downloader (#10165, #10448).
101 + Add support for --skip-unavailable-fragments in DASH downloader
102 + Introduce --skip-unavailable-fragments option for fragment based downloaders
103   that allows to skip fragments unavailable due to a HTTP error
104 * Fix extraction of video/audio entries with src attribute in
105   _parse_html5_media_entries (#10540)
106
107 Extractors
108 * [theplatform] Relax URL regular expression (#10546)
109 * [youtube:playlist] Extend URL regular expression
110 * [rottentomatoes] Delegate extraction to internetvideoarchive extractor
111 * [internetvideoarchive] Extract all formats
112 * [pornvoisines] Fix extraction (#10469)
113 * [rottentomatoes] Fix extraction (#10467)
114 * [espn] Extend URL regular expression (#10549)
115 * [vimple] Extend URL regular expression (#10547)
116 * [youtube:watchlater] Fix extraction (#10544)
117 * [youjizz] Fix extraction (#10437)
118 + [foxnews] Add support for FoxNews Insider (#10445)
119 + [fc2] Recognize Flash player URLs (#10512)
120
121
122 version 2016.09.03
123
124 Core
125 * Restore usage of NAME attribute from EXT-X-MEDIA tag for formats codes in
126   _extract_m3u8_formats (#10522)
127 * Handle semicolon in mimetype2ext
128
129 Extractors
130 + [youtube] Add support for rental videos' previews (#10532)
131 * [youtube:playlist] Fallback to video extraction for video/playlist URLs when
132   no playlist is actually served (#10537)
133 + [drtv] Add support for dr.dk/nyheder (#10536)
134 + [facebook:plugins:video] Add extractor (#10530)
135 + [go] Add extractor for *.go.com sites
136 * [adobepass] Check for authz_token expiration (#10527)
137 * [nytimes] improve extraction
138 * [thestar] Fix extraction (#10465)
139 * [glide] Fix extraction (#10478)
140 - [exfm] Remove extractor (#10482)
141 * [youporn] Fix categories and tags extraction (#10521)
142 + [curiositystream] Add extractor for app.curiositystream.com
143 - [thvideo] Remove extractor (#10464)
144 * [movingimage] Fix for the new site name (#10466)
145 + [cbs] Add support for once formats (#10515)
146 * [limelight] Skip ism snd duplicate manifests
147 + [porncom] Extract categories and tags (#10510)
148 + [facebook] Extract timestamp (#10508)
149 + [yahoo] Extract more formats
150
151
152 version 2016.08.31
153
154 Extractors
155 * [soundcloud] Fix URL regular expression to avoid clashes with sets (#10505)
156 * [bandcamp:album] Fix title extraction (#10455)
157 * [pyvideo] Fix extraction (#10468)
158 + [ctv] Add support for tsn.ca, bnn.ca and thecomedynetwork.ca (#10016)
159 * [9c9media] Extract more metadata
160 * [9c9media] Fix multiple stacks extraction (#10016)
161 * [adultswim] Improve video info extraction (#10492)
162 * [vodplatform] Improve embed regular expression
163 - [played] Remove extractor (#10470)
164 + [tbs] Add extractor for tbs.com and tntdrama.com (#10222)
165 + [cartoonnetwork] Add extractor for cartoonnetwork.com (#10110)
166 * [adultswim] Rework in terms of turner extractor
167 * [cnn] Rework in terms of turner extractor
168 * [nba] Rework in terms of turner extractor
169 + [turner] Add base extractor for Turner Broadcasting System based sites
170 * [bilibili] Fix extraction (#10375)
171 * [openload] Fix extraction (#10408)
172
173
174 version 2016.08.28
175
176 Core
177 + Add warning message that ffmpeg doesn't support SOCKS
178 * Improve thumbnail sorting
179 + Extract formats from #EXT-X-MEDIA tags in _extract_m3u8_formats
180 * Fill IV with leading zeros for IVs shorter than 16 octets in hlsnative
181 + Add ac-3 to the list of audio codecs in parse_codecs
182
183 Extractors
184 * [periscope:user] Fix extraction (#10453)
185 * [douyutv] Fix extraction (#10153, #10318, #10444)
186 + [nhk:vod] Add extractor for www3.nhk.or.jp on demand (#4437, #10424)
187 - [trutube] Remove extractor (#10438)
188 + [usanetwork] Add extractor for usanetwork.com
189 * [crackle] Fix extraction (#10333)
190 * [spankbang] Fix description and uploader extraction (#10339)
191 * [discoverygo] Detect cable provider restricted videos (#10425)
192 + [cbc] Add support for watch.cbc.ca
193 * [kickstarter] Silent the warning for og:description (#10415)
194 * [mtvservices:embedded] Fix extraction for the new 'edge' player (#10363)
195
196
197 version 2016.08.24.1
198
199 Extractors
200 + [pluralsight] Add support for subtitles (#9681)
201
202
203 version 2016.08.24
204
205 Extractors
206 * [youtube] Fix authentication (#10392)
207 * [openload] Fix extraction (#10408)
208 + [bravotv] Add support for Adobe Pass (#10407)
209 * [bravotv] Fix clip info extraction (#10407)
210 * [eagleplatform] Improve embedded videos detection (#10409)
211 * [awaan] Fix extraction
212 * [mtvservices:embedded] Update config URL
213 + [abc:iview] Add extractor (#6148)
214
215
216 version 2016.08.22
217
218 Core
219 * Improve formats and subtitles extension auto calculation
220 + Recognize full unit names in parse_filesize
221 + Add support for m3u8 manifests in HTML5 multimedia tags
222 * Fix octal/hexadecimal number detection in js_to_json
223
224 Extractors
225 + [ivi] Add support for 720p and 1080p
226 + [charlierose] Add new extractor (#10382)
227 * [1tv] Fix extraction (#9249)
228 * [twitch] Renew authentication
229 * [kaltura] Improve subtitles extension calculation
230 + [zingmp3] Add support for video clips
231 * [zingmp3] Fix extraction (#10041)
232 * [kaltura] Improve subtitles extraction (#10279)
233 * [cultureunplugged] Fix extraction (#10330)
234 + [cnn] Add support for money.cnn.com (#2797)
235 * [cbsnews] Fix extraction (#10362)
236 * [cbs] Fix extraction (#10393)
237 + [litv] Support 'promo' URLs (#10385)
238 * [snotr] Fix extraction (#10338)
239 * [n-tv.de] Fix extraction (#10331)
240 * [globo:article] Relax URL and video id regular expressions (#10379)
241
242
243 version 2016.08.19
244
245 Core
246 - Remove output template description from --help
247 * Recognize lowercase units in parse_filesize
248
249 Extractors
250 + [porncom] Add extractor for porn.com (#2251, #10251)
251 + [generic] Add support for DBTV embeds
252 * [vk:wallpost] Fix audio extraction for new site layout
253 * [vk] Fix authentication
254 + [hgtvcom:show] Add extractor for hgtv.com shows (#10365)
255 + [discoverygo] Add support for another GO network sites
256
257
258 version 2016.08.17
259
260 Core
261 + Add _get_netrc_login_info
262
263 Extractors
264 * [mofosex] Extract all formats (#10335)
265 + [generic] Add support for vbox7 embeds
266 + [vbox7] Add support for embed URLs
267 + [viafree] Add extractor (#10358)
268 + [mtg] Add support for viafree URLs (#10358)
269 * [theplatform] Extract all subtitles per language
270 + [xvideos] Fix HLS extraction (#10356)
271 + [amcnetworks] Add extractor
272 + [bbc:playlist] Add support for pagination (#10349)
273 + [fxnetworks] Add extractor (#9462)
274 * [cbslocal] Fix extraction for SendtoNews-based videos
275 * [sendtonews] Fix extraction
276 * [jwplatform] Extract video id from JWPlayer data
277 - [zippcast] Remove extractor (#10332)
278 + [viceland] Add extractor (#8799)
279 + [adobepass] Add base extractor for Adobe Pass Authentication
280 * [life:embed] Improve extraction
281 * [vgtv] Detect geo restricted videos (#10348)
282 + [uplynk] Add extractor
283 * [xiami] Fix extraction (#10342)
284
285
286 version 2016.08.13
287
288 Core
289 * Show progress for curl external downloader
290 * Forward more options to curl external downloader
291
292 Extractors
293 * [pbs] Fix description extraction
294 * [franceculture] Fix extraction (#10324)
295 * [pornotube] Fix extraction (#10322)
296 * [4tube] Fix metadata extraction (#10321)
297 * [imgur] Fix width and height extraction (#10325)
298 * [expotv] Improve extraction
299 + [vbox7] Fix extraction (#10309)
300 - [tapely] Remove extractor (#10323)
301 * [muenchentv] Fix extraction (#10313)
302 + [24video] Add support for .me and .xxx TLDs
303 * [24video] Fix comment count extraction
304 * [sunporno] Add support for embed URLs
305 * [sunporno] Fix metadata extraction (#10316)
306 + [hgtv] Add extractor for hgtv.ca (#3999)
307 - [pbs] Remove request to unavailable API
308 + [pbs] Add support for high quality HTTP formats
309 + [crunchyroll] Add support for HLS formats (#10301)
310
311
312 version 2016.08.12
313
314 Core
315 * Subtitles are now written as is. Newline conversions are disabled. (#10268)
316 + Recognize more formats in unified_timestamp
317
318 Extractors
319 - [goldenmoustache] Remove extractor (#10298)
320 * [drtuber] Improve title extraction
321 * [drtuber] Make dislike count optional (#10297)
322 * [chirbit] Fix extraction (#10296)
323 * [francetvinfo] Relax URL regular expression
324 * [rtlnl] Relax URL regular expression (#10282)
325 * [formula1] Relax URL regular expression (#10283)
326 * [wat] Improve extraction (#10281)
327 * [ctsnews] Fix extraction
328
329
330 version 2016.08.10
331
332 Core
333 * Make --metadata-from-title non fatal when title does not match the pattern
334 * Introduce options for randomized sleep before each download
335   --min-sleep-interval and --max-sleep-interval (#9930)
336 * Respect default in _search_json_ld
337
338 Extractors
339 + [uol] Add extractor for uol.com.br (#4263)
340 * [rbmaradio] Fix extraction and extract all formats (#10242)
341 + [sonyliv] Add extractor for sonyliv.com (#10258)
342 * [aparat] Fix extraction
343 * [cwtv] Extract HTTP formats
344 + [rozhlas] Add extractor for prehravac.rozhlas.cz (#10253)
345 * [kuwo:singer] Fix extraction
346
347
348 version 2016.08.07
349
350 Core
351 + Add support for TV Parental Guidelines ratings in parse_age_limit
352 + Add decode_png (#9706)
353 + Add support for partOfTVSeries in JSON-LD
354 * Lower master M3U8 manifest preference for better format sorting
355
356 Extractors
357 + [discoverygo] Add extractor (#10245)
358 * [flipagram] Make JSON-LD extraction non fatal
359 * [generic] Make JSON-LD extraction non fatal
360 + [bbc] Add support for morph embeds (#10239)
361 * [tnaflixnetworkbase] Improve title extraction
362 * [tnaflix] Fix metadata extraction (#10249)
363 * [fox] Fix theplatform release URL query
364 * [openload] Fix extraction (#9706)
365 * [bbc] Skip duplicate manifest URLs
366 * [bbc] Improve format code
367 + [bbc] Add support for DASH and F4M
368 * [bbc] Improve format sorting and listing
369 * [bbc] Improve playlist extraction
370 + [pokemon] Add extractor (#10093)
371 + [condenast] Add fallback scenario for video info extraction
372
373
374 version 2016.08.06
375
376 Core
377 * Add support for JSON-LD root list entries (#10203)
378 * Improve unified_timestamp
379 * Lower preference of RTSP formats in generic sorting
380 + Add support for multiple properties in _og_search_property
381 * Improve password hiding from verbose output
382
383 Extractors
384 + [adultswim] Add support for trailers (#10235)
385 * [archiveorg] Improve extraction (#10219)
386 + [jwplatform] Add support for playlists
387 + [jwplatform] Add support for relative URLs
388 * [jwplatform] Improve audio detection
389 + [tvplay] Capture and output native error message
390 + [tvplay] Extract series metadata
391 + [tvplay] Add support for subtitles (#10194)
392 * [tvp] Improve extraction (#7799)
393 * [cbslocal] Fix timestamp parsing (#10213)
394 + [naver] Add support for subtitles (#8096)
395 * [naver] Improve extraction
396 * [condenast] Improve extraction
397 * [engadget] Relax URL regular expression
398 * [5min] Fix extraction
399 + [nationalgeographic] Add support for Episode Guide
400 + [kaltura] Add support for subtitles
401 * [kaltura] Optimize network requests
402 + [vodplatform] Add extractor for vod-platform.net
403 - [gamekings] Remove extractor
404 * [limelight] Extract HTTP formats
405 * [ntvru] Fix extraction
406 + [comedycentral] Re-add :tds and :thedailyshow shortnames
407
408
409 version 2016.08.01
410
411 Fixed/improved extractors
412 - [yandexmusic:track] Adapt to changes in track location JSON (#10193)
413 - [bloomberg] Support another form of player (#10187)
414 - [limelight] Skip DRM protected videos
415 - [safari] Relax regular expressions for URL matching (#10202)
416 - [cwtv] Add support for cwtvpr.com (#10196)
417
418
419 version 2016.07.30
420
421 Fixed/improved extractors
422 - [twitch:clips] Sort formats
423 - [tv2] Use m3u8_native
424 - [tv2:article] Fix video detection (#10188)
425 - rtve (#10076)
426 - [dailymotion:playlist] Optimize download archive processing (#10180)
427
428
429 version 2016.07.28
430
431 Fixed/improved extractors
432 - shared (#10170)
433 - soundcloud (#10179)
434 - twitch (#9767)
435
436
437 version 2016.07.26.2
438
439 Fixed/improved extractors
440 - smotri
441 - camdemy
442 - mtv
443 - comedycentral
444 - cmt
445 - cbc
446 - mgtv
447 - orf
448
449
450 version 2016.07.24
451
452 New extractors
453 - arkena (#8682)
454 - lcp (#8682)
455
456 Fixed/improved extractors
457 - facebook (#10151)
458 - dailymail
459 - telegraaf
460 - dcn
461 - onet
462 - tvp
463
464 Miscellaneous
465 - Support $Time$ in DASH manifests
466
467
468 version 2016.07.22
469
470 New extractors
471 - odatv (#9285)
472
473 Fixed/improved extractors
474 - bbc
475 - youjizz (#10131)
476 - youtube (#10140)
477 - pornhub (#10138)
478 - eporner (#10139)
479
480
481 version 2016.07.17
482
483 New extractors
484 - nintendo (#9986)
485 - streamable (#9122)
486
487 Fixed/improved extractors
488 - ard (#10095)
489 - mtv
490 - comedycentral (#10101)
491 - viki (#10098)
492 - spike (#10106)
493
494 Miscellaneous
495 - Improved twitter player detection (#10090)
496
497
498 version 2016.07.16
499
500 New extractors
501 - ninenow (#5181)
502
503 Fixed/improved extractors
504 - rtve (#10076)
505 - brightcove
506 - 3qsdn
507 - syfy (#9087, #3820, #2388)
508 - youtube (#10083)
509
510 Miscellaneous
511 - Fix subtitle embedding for video-only and audio-only files (#10081)
512
513
514 version 2016.07.13
515
516 New extractors
517 - rudo
518
519 Fixed/improved extractors
520 - biobiochiletv
521 - tvplay
522 - dbtv
523 - brightcove
524 - tmz
525 - youtube (#10059)
526 - shahid (#10062)
527 - vk
528 - ellentv (#10067)
529
530
531 version 2016.07.11
532
533 New Extractors
534 - roosterteeth (#9864)
535
536 Fixed/improved extractors
537 - miomio (#9605)
538 - vuclip
539 - youtube
540 - vidzi (#10058)
541
542
543 version 2016.07.09.2
544
545 Fixed/improved extractors
546 - vimeo (#1638)
547 - facebook (#10048)
548 - lynda (#10047)
549 - animeondemand
550
551 Fixed/improved features
552 - Embedding subtitles no longer throws an error with problematic inputs (#9063)
553
554
555 version 2016.07.09.1
556
557 Fixed/improved extractors
558 - youtube
559 - ard
560 - srmediatek (#9373)
561
562
563 version 2016.07.09
564
565 New extractors
566 - Flipagram (#9898)
567
568 Fixed/improved extractors
569 - telecinco
570 - toutv
571 - radiocanada
572 - tweakers (#9516)
573 - lynda
574 - nick (#7542)
575 - polskieradio (#10028)
576 - le
577 - facebook (#9851)
578 - mgtv
579 - animeondemand (#10031)
580
581 Fixed/improved features
582 - `--postprocessor-args` and `--downloader-args` now accepts non-ASCII inputs
583   on non-Windows systems
584
585
586 version 2016.07.07
587
588 New extractors
589 - kamcord (#10001)
590
591 Fixed/improved extractors
592 - spiegel (#10018)
593 - metacafe (#8539, #3253)
594 - onet (#9950)
595 - francetv (#9955)
596 - brightcove (#9965)
597 - daum (#9972)
598
599
600 version 2016.07.06
601
602 Fixed/improved extractors
603 - youtube (#10007, #10009)
604 - xuite
605 - stitcher
606 - spiegel
607 - slideshare
608 - sandia
609 - rtvnh
610 - prosiebensat1
611 - onionstudios
612
613
614 version 2016.07.05
615
616 Fixed/improved extractors
617 - brightcove
618 - yahoo (#9995)
619 - pornhub (#9997)
620 - iqiyi
621 - kaltura (#5557)
622 - la7
623 - Changed features
624 - Rename --cn-verfication-proxy to --geo-verification-proxy
625 Miscellaneous
626 - Add script for displaying downloads statistics
627
628
629 version 2016.07.03.1
630
631 Fixed/improved extractors
632 - theplatform
633 - aenetworks
634 - nationalgeographic
635 - hrti (#9482)
636 - facebook (#5701)
637 - buzzfeed (#5701)
638 - rai (#8617, #9157, #9232, #8552, #8551)
639 - nationalgeographic (#9991)
640 - iqiyi
641
642
643 version 2016.07.03
644
645 New extractors
646 - hrti (#9482)
647
648 Fixed/improved extractors
649 - vk (#9981)
650 - facebook (#9938)
651 - xtube (#9953, #9961)
652
653
654 version 2016.07.02
655
656 New extractors
657 - fusion (#9958)
658
659 Fixed/improved extractors
660 - twitch (#9975)
661 - vine (#9970)
662 - periscope (#9967)
663 - pornhub (#8696)
664
665
666 version 2016.07.01
667
668 New extractors
669 - 9c9media
670 - ctvnews (#2156)
671 - ctv (#4077)
672
673 Fixed/Improved extractors
674 - rds
675 - meta (#8789)
676 - pornhub (#9964)
677 - sixplay (#2183)
678
679 New features
680 - Accept quoted strings across multiple lines (#9940)