python3.8 brotli brotli.error: BrotliDecompress falló？

Question

mycode python3.8

brotli = 1.0.9

use request get url, encabezados use Accept-Encoding = "br" necesito usar decode br, porque creo que use accept-encoding = br más bueno

import brotli
import requests 
headers = {}
headers['Accept'] = "text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9"
headers['Accept-Encoding'] = "gzip, deflate, br"
headers['Host'] = "book.douban.com"
headers['Referer'] = "book.douban.com"
headers['Sec-Fetch-Dest'] = "document"
headers['Sec-Fetch-Mode'] = "navigate"
headers['Upgrade-Insecure-Requests'] = "1"

s=requests.Session()
url="https://book.douban.com/tag/%E5%B0%8F%E8%AF%B4"
try:
    response = s.get(url, headers=headers)
except:
    return ""
if response.status_code == 200:
    print(response.headers)
    if response.headers.get('Content-Encoding') == 'br':
        data = brotli.decompress(response.content)
        data1 = data.decode('utf-8')
        return data1
    else:
        return response.text
return ""

generar error

data = brotli.decompress(response.content)
brotli.error: BrotliDecompress failed

Answer 1

Esto no se menciona en ninguna parte de la documentación de las solicitudes, pero una vez que se instala brotli , las solicitudes lo manejan directamente.

Esto significa que response.content se decodificará automáticamente (de forma similar a gzip). No necesitas hacerbrotli.decompress(response.content)

si brotli no está instalado, no recibirá ningún mensaje de error. En cambio, response.content permanecerá codificado ...

editar :

indagando en el código de Requests, descubrí que Requests usa urllib3.response que implementa el uso de Brotli.

al cargar, urllib3.response buscará una importación de Brotli:

try:
    import brotli
except ImportError:
    brotli = None

luego, al decodificar una respuesta, usará el decodificador apropiado:

def _get_decoder(mode):
    if "," in mode:
        return MultiDecoder(mode)

    if mode == "gzip":
        return GzipDecoder()

    if brotli is not None and mode == "br":
        return BrotliDecoder()

    return DeflateDecoder()

por lo tanto, si se instala Brotli, se producirá la decodificación; de lo contrario, no ocurrirá nada y no se advertirá al usuario.