paper over exception on dangerous.search

wasn't able to reproduce this.

[2020-08-17 16:47:53,157] ERROR in app: Exception on /search [GET]
Traceback (most recent call last):
  File "/opt/yt/venv/lib64/python3.6/site-packages/flask/app.py", line 2447, in wsgi_app
    response = self.full_dispatch_request()
  File "/opt/yt/venv/lib64/python3.6/site-packages/flask/app.py", line 1952, in full_dispatch_request
    rv = self.handle_user_exception(e)
  File "/opt/yt/venv/lib64/python3.6/site-packages/flask/app.py", line 1821, in handle_user_exception
    reraise(exc_type, exc_value, tb)
  File "/opt/yt/venv/lib64/python3.6/site-packages/flask/_compat.py", line 39, in reraise
    raise value
  File "/opt/yt/venv/lib64/python3.6/site-packages/flask/app.py", line 1950, in full_dispatch_request
    rv = self.dispatch_request()
  File "/opt/yt/venv/lib64/python3.6/site-packages/flask/app.py", line 1936, in dispatch_request
    return self.view_functions[rule.endpoint](**req.view_args)
  File "/opt/yt/app/dangerous/__init__.py", line 31, in search
    results, extras = prepare_searchresults(yt_results)
  File "/opt/yt/app/common/innertube.py", line 26, in prepare_searchresults
    return parse_result_items(contents)
  File "/opt/yt/app/common/innertube.py", line 169, in parse_result_items
    r, e = parse_result_items(content['content']['verticalListRenderer']['items'])
  File "/opt/yt/app/common/innertube.py", line 136, in parse_result_items
    listget(content.get('viewCountText',{}).get('runs'),0,{}).get('text')), # "1,234 watching"
  File "/opt/yt/app/common/innertube.py", line 12, in listget
    return next(iter(obj[index:]), fallback)
TypeError: 'NoneType' object is not subscriptable

ignore more advertisements

hacky way to get v1 and v2 channel responses (needs cleanup!)

don't crash cipher util when youtubedown can't decode cipher

fix dummy-card 1px offset

old style removed the border, shifting the last row 1px to the right.

README: add note regarding new channel protobuf

fallback from dangerous/channel (must fix browse_ajax)

make xmlfeed catch all channel subpages

needed for proper invidious/invidition redirect and fallback_route.

make csrf verification use http.parser instead of regexp

finally removes the unecessary csrf field from GET forms

document why we aren't deleting videos, clean up logging

sometimes videoDetails.lengthSeconds=="0"

microformat.playerMicroformatRenderer.lengthSeconds might still be good
then. seen on 'premiere' videos.

make view count thousand seperator a bit larger

found new innertube edge case

Revert "secondary channel format"

useless if it doesn't work all the time

This reverts commit 4e3b56b967570b9498651cf758a5ca3c56640689.

secondary channel format

reversed by omarroth on #invidious. his message:
The channel you sent me uses a different format. YouTube uses:
```json
{
  "80226972:0:embedded": {
    "2:0:string": "UC6Om9kAkl32dWlDSNlDS9Iw",
    "3:1:base64": {
      "2:0:string": "videos",
      "3:1:varint": 3,
      "4:2:varint": 0,
      "6:3:varint": 1,
      "7:4:varint": 1,
      "61:5:base64": {
        "1:0:embedded": {
          "2:1:embedded": {
            "1:0:base64": {
              "1:0:varint": 120
            }
          }
        }
      }
    }
  }
}
```

where `"1:0:varint": 120` is the offset into the channel.

show LIVE badge on subscription feed

add livestream detection for subscriptions

note that we usually fetch get_video_info so fast that even for
unannounced live streams, isLive will be false (with isUpcoming true).

make version closer to youtube

don't think it makes a difference compat-wise (invidious only has
"2.<hardcoded-date>")

remove stray end tag

move search css into a stylesheet

fix card macro behavriour w.r.t empty channel_id

fix writing youtubedown (unicode chars)

the cron job runs in LANG=C, so python defaults to ASCII encoding. also
redownload youtubedown if the on-disk size if 0 (e.g. due to this bug)

correct statement about idempotency of cronjobs

display length on /feed/subscriptions and use new infocard renderer

remove broken logging statement

fetch length for new subscription videos

in the future, we'll also detect whether it's a livestream

implement video badge (for length)

more innertube variants

support playlist end-of-list

add playlist metadata

Revert "useless youtube.com cargoculting"

This reverts commit d3b80d96aec748b19f08e8757ae847ce66b4df68.

useless youtube.com cargoculting

tried to reduce error ajax responses, but has no effect.

tone down channel search

add /user and /c redirects for dangerous blueprint

add /c/<username> route (alias for /user/)

implement channel search

retry browse_ajax twice on error

add has_more, cleanup, test for error-alerts

dangerous.channel/playlist: parse extra messages

move innertube stuff out of dangerous

search results: fix channel without subscriber count, add spelling info

implement channel and playlist endpoints using innertube

ZERO testing regarding whether this can get us banned!

implement search params

sadly, pure-protobuf is a small 3rd-party dependency :(

update welcome message

log info/endcard/searchitems errors to file

better what-to-bold strategy in base.j2

move parse_metadata to youtube blueprint

don't show 'None' if not video age

reformat innertube, wrapper for parse_*() -> prepare_*()

split metadata in essential and extended

extended is only used by /watch, but essential also for
store_video_metadata(). this allows is to move parse_metadata() to
the youtube blueprint.

/watch: use largest thumnail for channel cards

first draft of non-invidious search (needs cleanup!)

move innertube parsing into its own package, add searchresult parser

use all muxed formats for reliability

sometimes, a muxed stream is broken (yet still returns 200OK, so can't
easily detect server side). when the browser tries to load the broken
stream and can't play it, it moves on to the next available one.
was able to reproduce with ytid Xs9rnAH3VAQ

display name for playlist subscriptions in the manager

WIP: subscribing to playlist

this adds the possibility to subscribe to playlists. playlists don't
support websub, so they'll be updated via pull-sub only.

Note that pubsubhubbub.appspot.com pretends you can subscribe to the
'full' feeds, but then never send POSTs on update.

return channel and playlist ids from parse_xml

needed for /user/<> endpoint's card infobar; later useful when
subscribing to playlists

implement /user/<nice_username> endpoint in youtube

turns out there's an undocumented xmlfeed endpoint we can use

fix subscribe button on Subscription Manager

prevent linebreaks in cards

playlist endcards break between number and "videos" due to very
agressive flex sizing.

remove stray html comment

better pagination

example blueprint: show how to add a header item

move search bar out of header, implement way to include links in headerbar

move audio-only next to raw-video button

systemd units: put gunicorn config in /etc/yt

switch frontend to eventlet

less verbose welcome message

tone down welcome message css

clean up README, add license notice

make site R E S P O N S I V E (mobile friendly)

add a way to print all routes in their order of precedence

fix running __main__

apply proxy to whole stream map (not just best-muxed)

implement audio-only-mode, return all streams from g_v_i

make flash messages nicer

UGLY-HACKY: fallback image for card thumbnail

remove unused file

switch to systemd units, redo INSTALL as markdown file

better document standalone modules

re-format config.ini

add /websub route

useful for testing if the websub is running.

fix loading webhooks as frontend module, simplify startup.sh

port refresh-cipher to python (mostly, still calling youtubedown)

decouple reddit from common

fix premiere video handling

isLiveContent==False, isLive==True

don't use proxy for videos that don't need it

document proxy endpoint

make invidious_url point to HTML version (except show=raw)

use proxy for geolocked videos (iff enabled)

remove superfluous headers

use whitelist for forwarded response headers

requests_cache breaks videoproxy

streaming responses are fetched in full (and would fill up the cache)
see https://requests-cache.readthedocs.io/en/latest/user_guide.html

let all templates inherit from a base template

also some minor html changes (emojibuttons, navigation, css, ...)

use requests for proxy endpoint

create video proxy endpoint

log POST request data on internal errors

improve default subtitle handling

was broken when autogenerated was available, due to sorted()

make webhook a blueprint/standalone-hybrid

create example blueprint to demo ease of extenability