wrp

WRP - Proxy de renderização da web

Um servidor "proxy" navegador em navegador que permite usar navegadores da web históricos / vintage na web moderna. Tem dois modos:

• O modo ISMAP "gráfico", renderiza a página da web em uma imagem GIF, PNG ou JPG com imageMap clickable.
• O modo HTML simples converte a página da Web em Markdown e a renderiza em HTML simplificado para navegadores antigos.

Instruções de uso

• Faça o download de um binário WRP executá -lo em uma máquina que se tornará seu gateway/servidor WRP. Este deve ser hardware e sistema operacional modernos. O navegador do Google Chrome / Chromium deve ser pré -instalado. Não tente executar o WRP em uma máquina antiga como Windows XP ou 98.
• Verifique se você desativou o firewall ou a porta aberta WRP está ouvindo (por padrão 8080).
• Aponte seu navegador herdado para http://address:port do servidor WRP. Não defina ou use -o como um "servidor proxy".
• Digite uma string de pesquisa ou um URL completo HTTP/HTTPS e clique em Go .
• Selecione se deseja usar o modo gráfico (ISMAP) ou simples HTML.

Modo de mapa da imagem

• Ajuste a tela W Idth/ H Oito/ S Cale/ C Olors para caber no seu navegador antigo.
• Página da web de role clicando na barra de rolagem em imagem à direita.
• O WRP também permite uma única imagem alta sem a barra de rolagem vertical e use a rolagem do cliente. Para ativar isso, simplesmente altura H a 0 . No entanto, isso não deve ser usado com clientes de especificações antigas e baixas. Tais imagens altas serão muito grandes, levará muita memória e muito tempo para processar, especialmente para GIFs.
• Não use o histórico do navegador do cliente, em vez disso, use o botão BK no aplicativo.
• Você pode capturar a captura de tela da página sem recarregar usando o ST (STOP). Isso é útil se a página não se renderizou totalmente antes da captura de tela.
• Você também pode recarregar e re-capturar a página atual com RE (recarregar).
• Para enviar as teclas, preencha a caixa de entrada K e pressione Go . Também existem botões para as teclas de backspace, inserir e seta.
• Se o seu navegador suportar, prefira o PNG a GIF/JPG. O PNG é muito mais rápido, enquanto o GIF/JPG requer muito processamento adicional no cliente e no servidor para codificar/decodificar.
• As imagens GIF são, por padrão, codificadas com 216 cores, paleta "Web Safe". Isso usa um algoritmo de mapeamento de cores ultra rápido, mas não muito preciso. Se você quiser uma melhor representação de cores para o modo de cor 256.

Modo HTML simples

• Selecione Tipo de imagem PNG/GIF/JPG. Cada imagem individual do site original será convertida no formato selecionado.
• Digite o tamanho máximo da imagem em pixels.

Explicação da interface do usuário

A primeira caixa de entrada sem nome é a pesquisa (Google) ou URL começando com HTTP/HTTPS

GO Instrui o navegador para navegar para o URL ou executar a pesquisa

BK é história de volta

O ST é parado, também capturar a captura de captura de captura sem atualização da página, por exemplo, se a renderização da página leva muito tempo ou muda periodicamente

Re está recarregando

W é largura em pixels, ajuste -o para se livrar da barra de rolagem horizontal

H é altura em pixels, ajuste -o para se livrar da barra de rolagem vertical. Ele também pode ser definido como 0 para produzir uma imagem muito alta e usar rolagem do cliente. Esse tamanho 0 é experimental, buggy e deve ser usado com PNG e muita memória no lado do cliente.

Z é zoom ou escala

C é cores, apenas para imagens GIF (não utilizado em PNG, JPG)

K é a entrada de tecla, você pode digitar algumas letras nela e, quando clicar, ele será digitado no navegador remoto.

BS é backspace

RT é retorno / enter

< ^ v> são teclas de seta, normalmente para navegar em um mapa, buggy.

Personalização da interface do usuário

O WRP suporta a personalização da sua própria interface do usuário usando o arquivo de modelo HTML. Faça o download do Wrp.html Place no mesmo diretório com o WRP Binário, personalize -o ao seu gosto.

Docker

https://hub.docker.com/r/tenox7/wrp

$ docker run -d --rm -p 8080:8080 tenox7/wrp:latest

AWS

É possível executar o WRP no AWS App Runner.

Primeiro, você precisa fazer o upload da imagem do Docker para o ECR - instruções.

Crie o App Runner Service usando a imagem carregada usando o console ou CLI da AWS.

AWS Console

aws apprunner create-service --service-name my-app-runner-service --source-configuration ' {
    "ImageRepository": {
        "ImageIdentifier": "<account_id>.dkr.ecr.<region>.amazonaws.com/wrp:latest",
        "ImageRepositoryType": "ECR",
        "ImageConfiguration": {"Port": "8000"},
        "AutoDeploymentsEnabled": true
    }
} ' --instance-configuration ' {
    "Cpu": "1024",
    "Memory": "2048",
    "InstanceRoleArn": "arn:aws:iam::<account_id>:role/AppRunnerECRAccessRole"
} ' 

Instâncias do contêiner do Azure

Console do Azure

CLI:

$ az container create --resource-group wrp --name wrp --image tenox7/wrp:latest --cpu 1 --memory 2 --ports 80 --protocol tcp --os-type Linux --ip-address Public --command-line ' /wrp -l :80 -t png -g 1280x0x256 ' 

Google Cloud Run

$ gcloud run deploy --platform managed --image=tenox7/wrp:latest --memory=2Gi --args= ' -t=png ' , ' -g=1280x0x256 '

Infelizmente, o Google Cloud Run Run força você a usar o HTTPS, que provavelmente não funcionará com navegadores antigos.

Bandeiras

 -l   listen address:port (default :8080)
-m   mode, either ismap (graphical) or html
-t   image type gif, png or jpg (default gif)
-g   image geometry, WxHxC, height can be 0 for unlimited (default 1152x600x216)
     C (number of colors) is only used for GIF
-q   Jpeg image quality, default 75%
-h   headless mode, hide browser window on the server (default true)
-d   chromedp debug logging (default false)
-n   do not free maps and images after use (default false)
-ui  html template file (default "wrp.html")
-ua  user agent, override the default "headless" agent (only for ismap mode)
-s   delay/sleep after page is rendered before screenshot is taken (default 2s)

Requisitos mínimos

• O servidor/gateway requer hardware e sistema operacional moderno que é suportado pela linguagem GO e pelo navegador Chrome/Chromium, que deve ser instalado.
• O navegador do cliente precisa suportar HTML FORMs e ISMAP . Normalmente, o Mosaic 2.0 seria uma versão mínima para formulários. No entanto, o ISMAP foi suportado desde 0,6b; portanto, se você inserir manualmente o URL usando ?url=... , poderá usar a versão anterior.

Perguntas frequentes

Eu não consigo fazer isso para correr

Este programa não possui uma GUI e é executado na linha de comando. Após o download, pode ser necessário ativar o bit executável nos sistemas Unix, por exemplo:

$ cd ~ /Downloads
$ chmod +x wrp-amd64-macos
$ ./wrp-amd64-macos

Os sites estão bloqueando os navegadores sem cabeça

Este é um problema bem conhecido. O WRP tem algumas disposições para contornar isso, mas é um jogo de gato e rato. A primeira e principal recomendação é alterar o User Agent , para que não diga "sem cabeça". Adicione -ua="my agent" para substituir o padrão. Obtenha o agente de usuário do navegador de desktop regular e especifique -o como o sinalizador. Por exemplo:

$ wrp -ua= " Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/119.0.0.0 Safari/537.36 "

Por que o WRP é chamado "proxy" quando não é

O WRP começou originalmente como um proxy HTTP verdadeiro. No entanto, isso parou de funcionar porque toda a Internet agora está criptografada graças ao Let's Encrypt. Os navegadores herdados não suportam os certificados SSL/TLS modernos, bem como o HTTP Connect, para que esse modo tenha que ser desativado.

Você apoiará o modo http proxy no futuro?

Alguns esforços (tira SSL) estão em andamento, mas é muito difícil fazê -lo corretamente e a prioridade é bastante baixa.

Por que não existe uma imagem do Docker para o ARMV6

Porque https://hub.docker.com/r/chromedp/headlesshell/ não tem um. O WRP usa essa imagem. Se você tem um garfo que constrói para o ARMV6 me avise.

História

• A versão 1.0 (2014) começou como um script CGI-bin , adaptação de webkit2png.py e pcidade.py , post no blog.
• A versão 2.0 tornou-se um servidor http-proxy independente, suportando Linux e MacOS, outra postagem.
• Em 2016, graças ao Let's Encrypt, toda a Internet migrou para HTTPS/SSL/TLS e o WRP parou de funcionar. O código Python ficou inalterável e não havia uma maneira fácil de fazê -lo funcionar no Windows, mesmo sob a WSL.
• A versão 3.0 (2019) foi reescrita em Go usando o Chromedp como navegador no navegador em vez de http-proxy. A versão inicial foi inferior a 100 linhas de código.
• A versão 4.0 foi completamente reformada para usar os cliques do mouse via ImageMap em vez de analisar um HREF nós.
• Versão 4.1 Adicionado teclas de envio para caixas de entrada. Agora você pode fazer login no Gmail. Agora também é executado como um contêiner do Docker e nos contêineres da nuvem Run/Azure.
• A versão 4.5 apresenta a renderização de páginas inteiras em uma única imagem alta com rolagem do cliente.
• A versão 4.6 adiciona uma codificação de gif rápida em chamas de Hill MA.
• A versão 4.6.3 adiciona suporte ao recipiente do Docker ARM64 / AARCH64 - você pode executá -lo no Raspberry Pi!
• Versão 4.7 Adicione o HTML simples, também conhecido como leitor, também conhecido como modo de texto.
• Versão 4.8 Adicione suporte de imagem ao modo HTML simples.

Créditos

• Usa o Chromedp, obrigado a Mvdan por lidar com meus problemas
• Usa o Go-Quantize, graças a Ericpauley por desenvolver o quantizador de Go Missing
• Graças a Jason Stevens, divertido, com virtualização por hospedar graciosamente meus rumores
• Obrigado à Claunia pela ajuda com a versão Python/Webkit no passado
• Obrigado a Hill Ma pelo algoritmo de codificação Ultra Fast GIF
• As versões históricas de python/webkit e arte anterior podem ser vistas em repositório antigo

Relacionado

Você também pode estar interessado em:

• Vncfox
• BrowService
• Brows

Coisas legais

 License: Apache 2.0
Copyright (c) 2013-2024 Antoni Sawicki
Copyright (c) 2019-2024 Google LLC