[ustream] Support HLS streams (closes #10698)
[youtube-dl] / ChangeLog
1 version <unreleased>
2
3 Extractors
4 + [ustream] Support the new HLS streams (#10698)
5
6 version 2016.09.19
7
8 Extractors
9 + [crunchyroll] Check if already authenticated (#10700)
10 - [twitch:stream] Remove fallback to profile extraction when stream is offline
11 * [thisav] Improve title extraction (#10682)
12 * [vyborymos] Improve station info extraction
13
14
15 version 2016.09.18
16
17 Core
18 + Introduce manifest_url and fragments fields in formats dictionary for
19   fragmented media
20 + Provide manifest_url field for DASH segments, HLS and HDS
21 + Provide fragments field for DASH segments
22 * Rework DASH segments downloader to use fragments field
23 + Add helper method for Wowza Streaming Engine formats extraction
24
25 Extractors
26 + [vyborymos] Add extractor for vybory.mos.ru (#10692)
27 + [xfileshare] Add title regular expression for streamin.to (#10646)
28 + [globo:article] Add support for multiple videos (#10653)
29 + [thisav] Recognize HTML5 videos (#10447)
30 * [jwplatform] Improve JWPlayer detection
31 + [mangomolo] Add support for Mangomolo embeds
32 + [toutv] Add support for authentication (#10669)
33 * [franceinter] Fix upload date extraction
34 * [tv4] Fix HLS and HDS formats extraction (#10659)
35
36
37 version 2016.09.15
38
39 Core
40 * Improve _hidden_inputs
41 + Introduce improved explicit Adobe Pass support
42 + Add --ap-mso to provide multiple-system operator identifier
43 + Add --ap-username to provide MSO account username
44 + Add --ap-password to provide MSO account password
45 + Add --ap-list-mso to list all supported MSOs
46 + Add support for Rogers Cable multiple-system operator (#10606)
47
48 Extractors
49 * [crunchyroll] Fix authentication (#10655)
50 * [twitch] Fix API calls (#10654, #10660)
51 + [bellmedia] Add support for more Bell Media Television sites
52 * [franceinter] Fix extraction (#10538, #2105)
53 * [kuwo] Improve error detection (#10650)
54 + [go] Add support for free full episodes (#10439)
55 * [bilibili] Fix extraction for specific videos (#10647)
56 * [nhk] Fix extraction (#10633)
57 * [kaltura] Improve audio detection
58 * [kaltura] Skip chun format
59 + [vimeo:ondemand] Pass Referer along with embed URL (#10624)
60 + [nbc] Add support for NBC Olympics (#10361)
61
62
63 version 2016.09.11.1
64
65 Extractors
66 + [tube8] Extract categories and tags (#10579)
67 + [pornhub] Extract categories and tags (#10499)
68 * [openload] Temporary fix (#10408)
69 + [foxnews] Add support Fox News articles (#10598)
70 * [viafree] Improve video id extraction (#10615)
71 * [iwara] Fix extraction after relaunch (#10462, #3215)
72 + [tfo] Add extractor for tfo.org
73 * [lrt] Fix audio extraction (#10566)
74 * [9now] Fix extraction (#10561)
75 + [canalplus] Add support for c8.fr (#10577)
76 * [newgrounds] Fix uploader extraction (#10584)
77 + [polskieradio:category] Add support for category lists (#10576)
78 + [ketnet] Add extractor for ketnet.be (#10343)
79 + [canvas] Add support for een.be (#10605)
80 + [telequebec] Add extractor for telequebec.tv (#1999)
81 * [parliamentliveuk] Fix extraction (#9137)
82
83
84 version 2016.09.08
85
86 Extractors
87 + [jwplatform] Extract height from format label
88 + [yahoo] Extract Brightcove Legacy Studio embeds (#9345)
89 * [videomore] Fix extraction (#10592)
90 * [foxgay] Fix extraction (#10480)
91 + [rmcdecouverte] Add extractor for rmcdecouverte.bfmtv.com (#9709)
92 * [gamestar] Fix metadata extraction (#10479)
93 * [puls4] Fix extraction (#10583)
94 + [cctv] Add extractor for CCTV and CNTV (#8153)
95 + [lci] Add extractor for lci.fr (#10573)
96 + [wat] Extract DASH formats
97 + [viafree] Improve video id detection (#10569)
98 + [trutv] Add extractor for trutv.com (#10519)
99 + [nick] Add support for nickelodeon.nl (#10559)
100 + [abcotvs:clips] Add support for clips.abcotvs.com
101 + [abcotvs] Add support for ABC Owned Television Stations sites (#9551)
102 + [miaopai] Add extractor for miaopai.com (#10556)
103 * [gamestar] Fix metadata extraction (#10479)
104 + [bilibili] Add support for episodes (#10190)
105 + [tvnoe] Add extractor for tvnoe.cz (#10524)
106
107
108 version 2016.09.04.1
109
110 Core
111 * In DASH downloader if the first segment fails, abort the whole download
112   process to prevent throttling (#10497)
113 + Add support for --skip-unavailable-fragments and --fragment retries in
114   hlsnative downloader (#10165, #10448).
115 + Add support for --skip-unavailable-fragments in DASH downloader
116 + Introduce --skip-unavailable-fragments option for fragment based downloaders
117   that allows to skip fragments unavailable due to a HTTP error
118 * Fix extraction of video/audio entries with src attribute in
119   _parse_html5_media_entries (#10540)
120
121 Extractors
122 * [theplatform] Relax URL regular expression (#10546)
123 * [youtube:playlist] Extend URL regular expression
124 * [rottentomatoes] Delegate extraction to internetvideoarchive extractor
125 * [internetvideoarchive] Extract all formats
126 * [pornvoisines] Fix extraction (#10469)
127 * [rottentomatoes] Fix extraction (#10467)
128 * [espn] Extend URL regular expression (#10549)
129 * [vimple] Extend URL regular expression (#10547)
130 * [youtube:watchlater] Fix extraction (#10544)
131 * [youjizz] Fix extraction (#10437)
132 + [foxnews] Add support for FoxNews Insider (#10445)
133 + [fc2] Recognize Flash player URLs (#10512)
134
135
136 version 2016.09.03
137
138 Core
139 * Restore usage of NAME attribute from EXT-X-MEDIA tag for formats codes in
140   _extract_m3u8_formats (#10522)
141 * Handle semicolon in mimetype2ext
142
143 Extractors
144 + [youtube] Add support for rental videos' previews (#10532)
145 * [youtube:playlist] Fallback to video extraction for video/playlist URLs when
146   no playlist is actually served (#10537)
147 + [drtv] Add support for dr.dk/nyheder (#10536)
148 + [facebook:plugins:video] Add extractor (#10530)
149 + [go] Add extractor for *.go.com sites
150 * [adobepass] Check for authz_token expiration (#10527)
151 * [nytimes] improve extraction
152 * [thestar] Fix extraction (#10465)
153 * [glide] Fix extraction (#10478)
154 - [exfm] Remove extractor (#10482)
155 * [youporn] Fix categories and tags extraction (#10521)
156 + [curiositystream] Add extractor for app.curiositystream.com
157 - [thvideo] Remove extractor (#10464)
158 * [movingimage] Fix for the new site name (#10466)
159 + [cbs] Add support for once formats (#10515)
160 * [limelight] Skip ism snd duplicate manifests
161 + [porncom] Extract categories and tags (#10510)
162 + [facebook] Extract timestamp (#10508)
163 + [yahoo] Extract more formats
164
165
166 version 2016.08.31
167
168 Extractors
169 * [soundcloud] Fix URL regular expression to avoid clashes with sets (#10505)
170 * [bandcamp:album] Fix title extraction (#10455)
171 * [pyvideo] Fix extraction (#10468)
172 + [ctv] Add support for tsn.ca, bnn.ca and thecomedynetwork.ca (#10016)
173 * [9c9media] Extract more metadata
174 * [9c9media] Fix multiple stacks extraction (#10016)
175 * [adultswim] Improve video info extraction (#10492)
176 * [vodplatform] Improve embed regular expression
177 - [played] Remove extractor (#10470)
178 + [tbs] Add extractor for tbs.com and tntdrama.com (#10222)
179 + [cartoonnetwork] Add extractor for cartoonnetwork.com (#10110)
180 * [adultswim] Rework in terms of turner extractor
181 * [cnn] Rework in terms of turner extractor
182 * [nba] Rework in terms of turner extractor
183 + [turner] Add base extractor for Turner Broadcasting System based sites
184 * [bilibili] Fix extraction (#10375)
185 * [openload] Fix extraction (#10408)
186
187
188 version 2016.08.28
189
190 Core
191 + Add warning message that ffmpeg doesn't support SOCKS
192 * Improve thumbnail sorting
193 + Extract formats from #EXT-X-MEDIA tags in _extract_m3u8_formats
194 * Fill IV with leading zeros for IVs shorter than 16 octets in hlsnative
195 + Add ac-3 to the list of audio codecs in parse_codecs
196
197 Extractors
198 * [periscope:user] Fix extraction (#10453)
199 * [douyutv] Fix extraction (#10153, #10318, #10444)
200 + [nhk:vod] Add extractor for www3.nhk.or.jp on demand (#4437, #10424)
201 - [trutube] Remove extractor (#10438)
202 + [usanetwork] Add extractor for usanetwork.com
203 * [crackle] Fix extraction (#10333)
204 * [spankbang] Fix description and uploader extraction (#10339)
205 * [discoverygo] Detect cable provider restricted videos (#10425)
206 + [cbc] Add support for watch.cbc.ca
207 * [kickstarter] Silent the warning for og:description (#10415)
208 * [mtvservices:embedded] Fix extraction for the new 'edge' player (#10363)
209
210
211 version 2016.08.24.1
212
213 Extractors
214 + [pluralsight] Add support for subtitles (#9681)
215
216
217 version 2016.08.24
218
219 Extractors
220 * [youtube] Fix authentication (#10392)
221 * [openload] Fix extraction (#10408)
222 + [bravotv] Add support for Adobe Pass (#10407)
223 * [bravotv] Fix clip info extraction (#10407)
224 * [eagleplatform] Improve embedded videos detection (#10409)
225 * [awaan] Fix extraction
226 * [mtvservices:embedded] Update config URL
227 + [abc:iview] Add extractor (#6148)
228
229
230 version 2016.08.22
231
232 Core
233 * Improve formats and subtitles extension auto calculation
234 + Recognize full unit names in parse_filesize
235 + Add support for m3u8 manifests in HTML5 multimedia tags
236 * Fix octal/hexadecimal number detection in js_to_json
237
238 Extractors
239 + [ivi] Add support for 720p and 1080p
240 + [charlierose] Add new extractor (#10382)
241 * [1tv] Fix extraction (#9249)
242 * [twitch] Renew authentication
243 * [kaltura] Improve subtitles extension calculation
244 + [zingmp3] Add support for video clips
245 * [zingmp3] Fix extraction (#10041)
246 * [kaltura] Improve subtitles extraction (#10279)
247 * [cultureunplugged] Fix extraction (#10330)
248 + [cnn] Add support for money.cnn.com (#2797)
249 * [cbsnews] Fix extraction (#10362)
250 * [cbs] Fix extraction (#10393)
251 + [litv] Support 'promo' URLs (#10385)
252 * [snotr] Fix extraction (#10338)
253 * [n-tv.de] Fix extraction (#10331)
254 * [globo:article] Relax URL and video id regular expressions (#10379)
255
256
257 version 2016.08.19
258
259 Core
260 - Remove output template description from --help
261 * Recognize lowercase units in parse_filesize
262
263 Extractors
264 + [porncom] Add extractor for porn.com (#2251, #10251)
265 + [generic] Add support for DBTV embeds
266 * [vk:wallpost] Fix audio extraction for new site layout
267 * [vk] Fix authentication
268 + [hgtvcom:show] Add extractor for hgtv.com shows (#10365)
269 + [discoverygo] Add support for another GO network sites
270
271
272 version 2016.08.17
273
274 Core
275 + Add _get_netrc_login_info
276
277 Extractors
278 * [mofosex] Extract all formats (#10335)
279 + [generic] Add support for vbox7 embeds
280 + [vbox7] Add support for embed URLs
281 + [viafree] Add extractor (#10358)
282 + [mtg] Add support for viafree URLs (#10358)
283 * [theplatform] Extract all subtitles per language
284 + [xvideos] Fix HLS extraction (#10356)
285 + [amcnetworks] Add extractor
286 + [bbc:playlist] Add support for pagination (#10349)
287 + [fxnetworks] Add extractor (#9462)
288 * [cbslocal] Fix extraction for SendtoNews-based videos
289 * [sendtonews] Fix extraction
290 * [jwplatform] Extract video id from JWPlayer data
291 - [zippcast] Remove extractor (#10332)
292 + [viceland] Add extractor (#8799)
293 + [adobepass] Add base extractor for Adobe Pass Authentication
294 * [life:embed] Improve extraction
295 * [vgtv] Detect geo restricted videos (#10348)
296 + [uplynk] Add extractor
297 * [xiami] Fix extraction (#10342)
298
299
300 version 2016.08.13
301
302 Core
303 * Show progress for curl external downloader
304 * Forward more options to curl external downloader
305
306 Extractors
307 * [pbs] Fix description extraction
308 * [franceculture] Fix extraction (#10324)
309 * [pornotube] Fix extraction (#10322)
310 * [4tube] Fix metadata extraction (#10321)
311 * [imgur] Fix width and height extraction (#10325)
312 * [expotv] Improve extraction
313 + [vbox7] Fix extraction (#10309)
314 - [tapely] Remove extractor (#10323)
315 * [muenchentv] Fix extraction (#10313)
316 + [24video] Add support for .me and .xxx TLDs
317 * [24video] Fix comment count extraction
318 * [sunporno] Add support for embed URLs
319 * [sunporno] Fix metadata extraction (#10316)
320 + [hgtv] Add extractor for hgtv.ca (#3999)
321 - [pbs] Remove request to unavailable API
322 + [pbs] Add support for high quality HTTP formats
323 + [crunchyroll] Add support for HLS formats (#10301)
324
325
326 version 2016.08.12
327
328 Core
329 * Subtitles are now written as is. Newline conversions are disabled. (#10268)
330 + Recognize more formats in unified_timestamp
331
332 Extractors
333 - [goldenmoustache] Remove extractor (#10298)
334 * [drtuber] Improve title extraction
335 * [drtuber] Make dislike count optional (#10297)
336 * [chirbit] Fix extraction (#10296)
337 * [francetvinfo] Relax URL regular expression
338 * [rtlnl] Relax URL regular expression (#10282)
339 * [formula1] Relax URL regular expression (#10283)
340 * [wat] Improve extraction (#10281)
341 * [ctsnews] Fix extraction
342
343
344 version 2016.08.10
345
346 Core
347 * Make --metadata-from-title non fatal when title does not match the pattern
348 * Introduce options for randomized sleep before each download
349   --min-sleep-interval and --max-sleep-interval (#9930)
350 * Respect default in _search_json_ld
351
352 Extractors
353 + [uol] Add extractor for uol.com.br (#4263)
354 * [rbmaradio] Fix extraction and extract all formats (#10242)
355 + [sonyliv] Add extractor for sonyliv.com (#10258)
356 * [aparat] Fix extraction
357 * [cwtv] Extract HTTP formats
358 + [rozhlas] Add extractor for prehravac.rozhlas.cz (#10253)
359 * [kuwo:singer] Fix extraction
360
361
362 version 2016.08.07
363
364 Core
365 + Add support for TV Parental Guidelines ratings in parse_age_limit
366 + Add decode_png (#9706)
367 + Add support for partOfTVSeries in JSON-LD
368 * Lower master M3U8 manifest preference for better format sorting
369
370 Extractors
371 + [discoverygo] Add extractor (#10245)
372 * [flipagram] Make JSON-LD extraction non fatal
373 * [generic] Make JSON-LD extraction non fatal
374 + [bbc] Add support for morph embeds (#10239)
375 * [tnaflixnetworkbase] Improve title extraction
376 * [tnaflix] Fix metadata extraction (#10249)
377 * [fox] Fix theplatform release URL query
378 * [openload] Fix extraction (#9706)
379 * [bbc] Skip duplicate manifest URLs
380 * [bbc] Improve format code
381 + [bbc] Add support for DASH and F4M
382 * [bbc] Improve format sorting and listing
383 * [bbc] Improve playlist extraction
384 + [pokemon] Add extractor (#10093)
385 + [condenast] Add fallback scenario for video info extraction
386
387
388 version 2016.08.06
389
390 Core
391 * Add support for JSON-LD root list entries (#10203)
392 * Improve unified_timestamp
393 * Lower preference of RTSP formats in generic sorting
394 + Add support for multiple properties in _og_search_property
395 * Improve password hiding from verbose output
396
397 Extractors
398 + [adultswim] Add support for trailers (#10235)
399 * [archiveorg] Improve extraction (#10219)
400 + [jwplatform] Add support for playlists
401 + [jwplatform] Add support for relative URLs
402 * [jwplatform] Improve audio detection
403 + [tvplay] Capture and output native error message
404 + [tvplay] Extract series metadata
405 + [tvplay] Add support for subtitles (#10194)
406 * [tvp] Improve extraction (#7799)
407 * [cbslocal] Fix timestamp parsing (#10213)
408 + [naver] Add support for subtitles (#8096)
409 * [naver] Improve extraction
410 * [condenast] Improve extraction
411 * [engadget] Relax URL regular expression
412 * [5min] Fix extraction
413 + [nationalgeographic] Add support for Episode Guide
414 + [kaltura] Add support for subtitles
415 * [kaltura] Optimize network requests
416 + [vodplatform] Add extractor for vod-platform.net
417 - [gamekings] Remove extractor
418 * [limelight] Extract HTTP formats
419 * [ntvru] Fix extraction
420 + [comedycentral] Re-add :tds and :thedailyshow shortnames
421
422
423 version 2016.08.01
424
425 Fixed/improved extractors
426 - [yandexmusic:track] Adapt to changes in track location JSON (#10193)
427 - [bloomberg] Support another form of player (#10187)
428 - [limelight] Skip DRM protected videos
429 - [safari] Relax regular expressions for URL matching (#10202)
430 - [cwtv] Add support for cwtvpr.com (#10196)
431
432
433 version 2016.07.30
434
435 Fixed/improved extractors
436 - [twitch:clips] Sort formats
437 - [tv2] Use m3u8_native
438 - [tv2:article] Fix video detection (#10188)
439 - rtve (#10076)
440 - [dailymotion:playlist] Optimize download archive processing (#10180)
441
442
443 version 2016.07.28
444
445 Fixed/improved extractors
446 - shared (#10170)
447 - soundcloud (#10179)
448 - twitch (#9767)
449
450
451 version 2016.07.26.2
452
453 Fixed/improved extractors
454 - smotri
455 - camdemy
456 - mtv
457 - comedycentral
458 - cmt
459 - cbc
460 - mgtv
461 - orf
462
463
464 version 2016.07.24
465
466 New extractors
467 - arkena (#8682)
468 - lcp (#8682)
469
470 Fixed/improved extractors
471 - facebook (#10151)
472 - dailymail
473 - telegraaf
474 - dcn
475 - onet
476 - tvp
477
478 Miscellaneous
479 - Support $Time$ in DASH manifests
480
481
482 version 2016.07.22
483
484 New extractors
485 - odatv (#9285)
486
487 Fixed/improved extractors
488 - bbc
489 - youjizz (#10131)
490 - youtube (#10140)
491 - pornhub (#10138)
492 - eporner (#10139)
493
494
495 version 2016.07.17
496
497 New extractors
498 - nintendo (#9986)
499 - streamable (#9122)
500
501 Fixed/improved extractors
502 - ard (#10095)
503 - mtv
504 - comedycentral (#10101)
505 - viki (#10098)
506 - spike (#10106)
507
508 Miscellaneous
509 - Improved twitter player detection (#10090)
510
511
512 version 2016.07.16
513
514 New extractors
515 - ninenow (#5181)
516
517 Fixed/improved extractors
518 - rtve (#10076)
519 - brightcove
520 - 3qsdn
521 - syfy (#9087, #3820, #2388)
522 - youtube (#10083)
523
524 Miscellaneous
525 - Fix subtitle embedding for video-only and audio-only files (#10081)
526
527
528 version 2016.07.13
529
530 New extractors
531 - rudo
532
533 Fixed/improved extractors
534 - biobiochiletv
535 - tvplay
536 - dbtv
537 - brightcove
538 - tmz
539 - youtube (#10059)
540 - shahid (#10062)
541 - vk
542 - ellentv (#10067)
543
544
545 version 2016.07.11
546
547 New Extractors
548 - roosterteeth (#9864)
549
550 Fixed/improved extractors
551 - miomio (#9605)
552 - vuclip
553 - youtube
554 - vidzi (#10058)
555
556
557 version 2016.07.09.2
558
559 Fixed/improved extractors
560 - vimeo (#1638)
561 - facebook (#10048)
562 - lynda (#10047)
563 - animeondemand
564
565 Fixed/improved features
566 - Embedding subtitles no longer throws an error with problematic inputs (#9063)
567
568
569 version 2016.07.09.1
570
571 Fixed/improved extractors
572 - youtube
573 - ard
574 - srmediatek (#9373)
575
576
577 version 2016.07.09
578
579 New extractors
580 - Flipagram (#9898)
581
582 Fixed/improved extractors
583 - telecinco
584 - toutv
585 - radiocanada
586 - tweakers (#9516)
587 - lynda
588 - nick (#7542)
589 - polskieradio (#10028)
590 - le
591 - facebook (#9851)
592 - mgtv
593 - animeondemand (#10031)
594
595 Fixed/improved features
596 - `--postprocessor-args` and `--downloader-args` now accepts non-ASCII inputs
597   on non-Windows systems
598
599
600 version 2016.07.07
601
602 New extractors
603 - kamcord (#10001)
604
605 Fixed/improved extractors
606 - spiegel (#10018)
607 - metacafe (#8539, #3253)
608 - onet (#9950)
609 - francetv (#9955)
610 - brightcove (#9965)
611 - daum (#9972)
612
613
614 version 2016.07.06
615
616 Fixed/improved extractors
617 - youtube (#10007, #10009)
618 - xuite
619 - stitcher
620 - spiegel
621 - slideshare
622 - sandia
623 - rtvnh
624 - prosiebensat1
625 - onionstudios
626
627
628 version 2016.07.05
629
630 Fixed/improved extractors
631 - brightcove
632 - yahoo (#9995)
633 - pornhub (#9997)
634 - iqiyi
635 - kaltura (#5557)
636 - la7
637 - Changed features
638 - Rename --cn-verfication-proxy to --geo-verification-proxy
639 Miscellaneous
640 - Add script for displaying downloads statistics
641
642
643 version 2016.07.03.1
644
645 Fixed/improved extractors
646 - theplatform
647 - aenetworks
648 - nationalgeographic
649 - hrti (#9482)
650 - facebook (#5701)
651 - buzzfeed (#5701)
652 - rai (#8617, #9157, #9232, #8552, #8551)
653 - nationalgeographic (#9991)
654 - iqiyi
655
656
657 version 2016.07.03
658
659 New extractors
660 - hrti (#9482)
661
662 Fixed/improved extractors
663 - vk (#9981)
664 - facebook (#9938)
665 - xtube (#9953, #9961)
666
667
668 version 2016.07.02
669
670 New extractors
671 - fusion (#9958)
672
673 Fixed/improved extractors
674 - twitch (#9975)
675 - vine (#9970)
676 - periscope (#9967)
677 - pornhub (#8696)
678
679
680 version 2016.07.01
681
682 New extractors
683 - 9c9media
684 - ctvnews (#2156)
685 - ctv (#4077)
686
687 Fixed/Improved extractors
688 - rds
689 - meta (#8789)
690 - pornhub (#9964)
691 - sixplay (#2183)
692
693 New features
694 - Accept quoted strings across multiple lines (#9940)