Merge branch 'huajiao' of https://github.com/pyx/youtube-dl into pyx-huajiao

[crunchyroll] Skip an invalid _TEST

[cmt] Fix mgid extraction (closes #10813)

The example in #10813 requires TV provider authentication in Firefox,
while youtube-dl can download it directly with an US proxy.

I'm not sure whether the mgid fix is cmt-specific or it applies to all
mtv-based sites. I keep it in cmt.py until similar patterns are found in
other websites.

Made optional fields optional

[safari:course] Add support for techbus.safaribooksonline.com

[orf:tvthek] Fix extraction and modernize (closes #10898)

README.md: fix alrady typo

[clipfish] Update _TEST; the old one is gone

[chirbit:profile] Fix extraction

[carambatv] Fix extraction

The video requested in #9815 now has videomore embeds.

[videomore] Support <iframe> embed videos

Seen in CarambaTVPage

[canalplus] Fix video_id and update _TESTS

Some tests are gone, and some redirect to different videos

[cbsinteractive] Fix extraction for cnet.com

[huajiao] Add new extractor

[parliamentliveuk] Recognize lower case URLs

Closes #10912

Seems parliamentliveuk matches URLs case-insentive. For example this URL
also works:
http://parliamentlive.tv/EvEnt/Index/3F24936f-130f-40bf-9a5d-b3d6479da6a4

release 2016.10.12

[ChangeLog] Actualize

[downloader/common] Remove debug output

[streamable] Remove debug output

[dailymotion] Fix extraction and update _TESTS

Closes #10901

Seems all videos use player V5 syntax now

[vimeo:review] Fix extraction (#10900)

Now Vimeo Review videos uses React. Thanks @davekaro for analyzing the
problem!

[test/test_http] Update tests

After switching to HTML5 extraction helpers in generic.py, the result
info_dict is always a playlist.

[extractor/common] Support HTML media elements without child nodes

[nhl] Skip invalid m3u8 formats (closes #10713)

[hbo] Add HBOEpisodeIE (#10892)

[footyroom] Fix extraction and update _TESTS (closes #10810)

[streamable] Add helper for extracting embedded videos

[abc.net.au:iview] Fix for non-series videos (closes #10895)

[hbo] Add display_id and another test (#10892)

[hbo] Support episode pages (closes #10892)

[allocine] Fix for /video/ videos (closes #10860)

[allocine] Fix extraction (closes #10860)

I change the URL of the third test case, because now the original URL
does not contain a video anymore, and there's no easy to get the real
URL from the /film/ one.

[nextmedia] Support action news (動新聞) on Apple Daily

[Makefile] Fix for GNU make < 4 (closes #9387)

Shell assignment operator in BSD make != is ported to GNU make in
version 4.0, so 3.x doesn't work. I choose to drop BSD make support as
installing GNU make on *BSD systems is easier than installing newer GNU
make.

[slutload] Fix test and simplify

[reverbnation] Eliminate code duplication in thumbnails extraction

[reverbnation] Modernize

[lego] improve info extraction and bypass geo restriction(closes #10872)

release 2016.10.07

[ChangeLog] Actualize

[vimeo] PEP 8
[ci skip]

[iprima] detect geo restriction

[facebook] Fix for new handleServerJS syntax (closes #10846)

According to the dump file in #10846, handleServerJS() now accepts
an optional second argument. It's a string from available dump files.

[extractors] Add MmsIE

[generic,commonprotocols] Move mms suuport from GenericIE

And use _generic_* helpers in those extractors

[extractor/common] Add id and title helpers for generic IEs

[generic] Support direct MMS links (closes #10838)

Revert "[Makefilea] Fix for GNU make < 4"

This reverts commit 831a34caa2112a9b2d867e05f8a4debf965e8389.

The reverted commit breaks lazy extractors.

[Makefilea] Fix for GNU make < 4

Closes #9387

The shell assignment operator != was introduced in GNU make 4.0, or
specifically the commit in [1]. This fix removes such usages and
fallback to a more portable syntax. Tested with:

* GNU make 3.82 on CentOS 7.2
* bmake 20150910 on CentOS 7.2, source RPM from Fedora 24 [2]
* GNU make 4.2.1 on Arch Linux (Arch official package)
* bmake 20160926 on Arch Linux (Arch official package)
* GNU make 3.82 on Arch Linux (Compiled from source)
* Apple bsdmake-24 on macOS Sierra, binary package from Homebrew

Thanks @bdeyal for the feedback of the first tests

[1] http://git.savannah.gnu.org/cgit/make.git/commit/?id=b34438bee83ee906a23b881f257e684a0993b9b1
[2] http://koji.fedoraproject.org/koji/buildinfo?buildID=716769

[generic] Add support for multiple vimeo embeds (Closes #10862)

[nzz] Add new extractor(#4407)

[npo] detect geo restriction

[npo] Add support for 2doc.nl (Closes #10842)

Rename "Steffan 'Ruirize' James" to "Steffan Donal"

Legal name change!

[lego] Add new extractor(closes #10369)

[tonline] Add new extractor(#10376)

[techtalks] Relax _VALID_URL

[techtalks] Allow URL-s with name part omitted.

[youtube:live] Extend _VALID_URL (Closes #10839)

[theweatherchannel] Add new extractor(closes #7188)

Unify coding cookie

[thisoldhouse] Add new extractor(closes #10837)

[nhl] Add support for wch2016.com (Closes #10833)

Merge pull request #10829 from TRox1972/pornoxo_improve

[pornoxo] Use JWPlatform to improve metadata extraction

[pornoxo] Use JWPlatform to improve metadata extraction

release 2016.10.02

[ChangeLog] Actualize

[amcnetworks] Skip a restricted _TEST

[jwplatform] Support DASH streams

[jwplatform] Support old-style jwplayer playlists

[utils] Fix xattr error handling

[__init__] Fix lost xattr if --embed-thumbnail used

Reported at
https://github.com/rg3/youtube-dl/issues/9054#issuecomment-250451823

[byutv:event] Add extractor

[byutv] Fix id and display id

[byutv] Rely on _match_id and _parse_json

[periscope:user] Fix extraction (Closes #10820)

[utils] Support xattr as well as pyxattr

Closes #9054

There are two xattr packages in Python, pyxattr [1] and xattr [2]. They
have different APIs.

In old days pyxattr supports Linux only and xattr supports Linux, Mac,
FreeBSD and Solaris, and pyxattr supports Linux only. Recently pyxattr
adds support for Mac OS X. [3]

An old version of [2] is shipped with Mac OS X. However, some Linux
distributions have pyxattr only, for example PLD-Linux [4] and old Arch
Linux. [5] As a result, supporting both is the way to go.

[1] https://github.com/iustin/pyxattr
[2] https://github.com/xattr/xattr
[3] https://github.com/iustin/pyxattr/pull/9
[4] https://github.com/rg3/youtube-dl/issues/5498
[5] https://git.archlinux.org/svntogit/community.git/commit/?id=427c4c76401e386d865ccddea4fbfdc74df80492
    https://git.archlinux.org/svntogit/community.git/commit/?id=59b40da7b69622a6761d364a8b07909e9cccaa56
    python-xattr is added on 2016/06/29 while pyxattr is there for more
    than 6 years

[downloader/http] xattr values should be bytes

Merge pull request #10818 from TRox1972/criterion_match_id

[criterion] Rely on _match_id, improve regex and add thumbnail to test

[criterion] Rely on _match_id, improve regex and add thumbnail to test

[twitch] Skip a 404 test

Merge pull request #10817 from TRox1972/clubic_match_id

[clubic] Rely on _match_id and _parse_json

[dctp] Fix extraction (closes #10734)

[downloader/http] Use write_xattr function for --xattr-set-filesize

[clubic] Rely on _match_id and _parse_json

[instagram] PEP 8

[Instagram] Extract video dimensions

[tvland] Extend _VALID_URL (Closes #10812)

[vgtv] Add support for tv.aftonbladet.se (Closes #10800)

[aftonbladet] Remove extractor

[vk] Improve view count extraction

[vk] Extract timestamp (Closes #10760)

[utils] Lower priority for rare date formats and add tests

[vk] Fix date and view count extraction.

Move write_xattr to utils.py

There are some other places that use xattr functions. It's better to
move it to a common place so that others can use it.

[vk] Add support for running live streams (Closes #10799)

[vk] Add support for finished live streams (#10799)

Merge pull request #10788 from TRox1972/instagram_comments

[Instagram] Extract comments

[leeco] Recognize more Le Sports URLs (#10794)

[Instagram] Extract comments