[youtube:toplist] Make the regex for finding the playlist link more flexible

`title={foo}` may not be at the end of the `href` string.

Some pep8 style fixes

[extractor/common] Encode the url when calculating the md5 with `—write-pages` option

This doesn’t cause any problem in python 2.*, but on python 3 the `md5` function only accepts bytes.

[rtlnow] Simplify

Properly escape ‘.’ in some _VALID_URL properties

Add an extractor for freespeech.org (closes #2234)

release 2014.01.23.4

[youtube] Fix new formats

release 2014.01.23.3

[youtube] Add new formats (Fixes #2221)

Add build instructions (Fixes #2218)

[youtube] Do not break upon unknown formats

release 2014.01.23.2

Do not count unmatched videos for --max-downloads (Fixes #2211)

Mention default for -f (Fixes #2215)

[youtube:truncated_url] Also match mail subscription links (#2214)

[sina] Recognize http://video.sina.com.cn/v/b/{id}-*.html urls (fixes #2212)

[sina] use unicode_literals

release 2014.01.23.1

Correct --max-downloads with --ignore-errors

Clarify update output (Fixes #2205)

No, we are not intentionally hiding the version number. Why would we?

[rottentomatoes] Use unicode_literals

[xhamster] Futher simplification

[xhamster] Use unicode_literals

[xhamster] Add support for hd video

Signed-off-by: Philipp Hagemeister <phihag@phihag.de>

release 2014.01.23

[nowness] Add support

[gamespot] Fix regexp

Move --youtube-include-dash-manifest into correct option group

release 2014.01.22.5

[youtube] Make DASH manifest download conditional for now

DASH download fails on many videos (all with encrypted signatures? not sure yet), for example 07FYdnEawAQ, with a 403.

Add __len__ to PagedLists

[newgrounds] Simplify

release 2014.01.22.4

Merge branch 'paged-lists'

Conflicts:
test/test_utils.py
youtube_dl/extractor/youtube.py

Merge branch 'youtube-dash-manifest'

Conflicts:
youtube_dl/extractor/youtube.py

[xvideos] Simplify

[xvideos] Fix thumbnail extraction

Signed-off-by: Philipp Hagemeister <phihag@phihag.de>

[cspan] Disable test

It works fine from all my machines, no matter where, but from travis, we get lots of 403s.
Maybe another project is scraping CSPAN from travis and they're blocking the travis machines?

Document -f worstaudio as well

release 2014.01.22.3

Default to -f best-audio when only audio is requested

Use unicode_literals in test_YoutubeDL

Add -f bestaudio (Fixes #2163)

release 2014.01.22.2

Add new --default-search option (#2193)

[comedycentral] Use the generic `_real_extract` provided by the base class

Merge pull request #2195 from dstftw/master

[space] Add support for mobile URLs

[southparkstudios] Use the generic `_real_extract` provided by the base class

[space] Add support for mobile URLs

[cspan] Make ‘www’ optional and improve the regex for extracting the id (fixes #2194)

[gametrailers] Use the generic `_real_extract` provided by the base class

[comedycentral] Use unicode_literals

[comedycentral] Adapt testcase

In contrast to other sites, ComedyCentral seems to understand how to sensibly use MTV IE, but the additional text shouldn't hurt.

[imdb:list] Switch to loading the webpage

The RSS method seems to be defunct.

[d8] typo

[d8] disable test; video got deleted

[novamov] Skip tests

release 2014.01.22.1

[ringtv] Fix and add news extraction

[mtv] Update tests and xpath function for new title extraction

[Wimp] Use new URL relay method

[hotnewhiphop] Retrieve media key

[gametrailers/mtv] Fix pre-3.x compatibility function for find_xpath_attr

Fixes #2189

[servingsys] Do not run test on travis

Apparantly, even the advertisers do geoblocking now!?
From the US, this isn't outright blocked, but there are no videos returned.

release 2014.01.22

Merge branch 'master' of github.com:rg3/youtube-dl

Conflicts:
youtube_dl/extractor/mtv.py

[gametrailers] Use unicode_literals

Conflicts:
youtube_dl/extractor/gametrailers.py

[mtv] Use unicode_literals

[mtv] Fix title for gametrailers (Fixes #2188)

We now prefer the title including the category, because that title is what is presented at the actual sites.

[brightcove] Fix extraction of embedded videos

There was a leading ‘:’ in the regex.
The ‘flashvars’ parameter is not always available.

[brightcove] Fix check for url in the result

It may have the ‘formats’ field instead of ‘url’.

[mtv] Add an extractor for mtviggy.com (#2072)

Add an extractor for spike.com (#2072)

Added a generic _real_extract to MTVServicesInfoExtractor

[mtv] Check for geo-blocked videos in the xml document, not in the xml’s string

Allows to use the `_download_xml` method

[mtv] Use unicode_literals

release 2014.01.21.1

[vk] Add support for HQ videos (Fixes #2187)

[facebook] Add support for embeds

Example URL: http://www.hostblogger.de/blog/archives/6181-Auto-jagt-Betonmischer.html

[vk] Use unicode_literals

[vk] avoid built-in names

[redtube] Use unicode_literals

[redtube] Add support for thumbnails

Signed-off-by: Philipp Hagemeister <phihag@phihag.de>

release 2014.01.21

[servingsys] Add support

This also adds support for brightcove advertisements.
Fixes #2181

[extractor/common] Clarify when and when not we generate the filename

[generic] Improve testcase

Deal with implicitly UTF-16 decoded webpages

These webpages don't specify an encoding and rely on the BOM

Correct XML ampersand fixup

release 2014.01.20

Add infrastructure for paged lists

This commit allows to download pages in playlists as needed instead of all at once.
Before this commit,
    youtube-dl http://www.youtube.com/user/ANNnewsCH/videos --playlist-end 2 --skip-download
took quite some time - now it's almost instantaneous.
As an example, the youtube:user extractor has been converted.
Fixes #2175

[youtube] Fall back to header if playlist title is not available

Sometimes (in about 10% of requests), the og:title is missing for a weird reason.
See #2170 for an example

[myspace] More robust mediatype check

[myspace] Add support for song urls (fixes #2040)

[dropbox] Correct test case (#2171)

[dropbox] PEP8 and simplify (#2171)

Merge remote-tracking branch 'sahutd/master'

Modified dropbox to reflect small changes

Added support for Dropbox

[youtube] Download DASH manifest

If given, download and parse the DASH manifest file, in order to get ultra-HQ formats.
Fixes #2166