twayback

Twayback: Herunterladen gelöschter Tweets vom Wayback -Computer, einfach gemacht

Traurige Nachrichten Juli 2023 - Aufgrund der jüngsten Änderungen an der Twitter -Plattform kann dieses Tool nicht wie beabsichtigt funktionieren. Anmeldung ist erforderlich, um sogar Tweets anzusehen, ganz zu schweigen von der Ratenbegrenzung. Ich werde dieses Repo auflasse, falls jemand daraus lernen möchte, aber ich werde das Tool wahrscheinlich nicht aktualisieren. Vielen Dank an alle, die in diesem Projekt einen Nutzen gebracht haben und einen Nutzen gefunden haben.

Das Finden und Herunterladen gelöschter Tweets braucht viel Zeit. Zum Glück wird es mit diesem Werkzeug zu einem Kinderspiel! ?

Twayback ist ein Portmanteau von Twitter und The Wayback Machine . Geben Sie Ihren gewünschten Twitter -Benutzernamen ein und lassen Sie Twayback den Rest machen!

Merkmale

• Kann einige oder alle archivierten gelöschten Tweets eines Benutzers herunterladen.
• Mit Tweets Text in eine Textdatei extrahieren (ja, sogar Retweets zitieren!)
• Hat die Fähigkeit, tweets gelöscht zu werden.
• Ermöglicht eine benutzerdefinierte Zeitbereich, nach gelöschten Tweets zwischen zwei Datteln einzugrenzen.
• Unterscheidet zwischen aktiven, suspendierten Konten oder existieren nicht mehr.
• Lassen Sie sich wissen, ob die archivierten Tweets eines Zielhandels von der Wayback -Maschine ausgeschlossen wurden.
• Speichert ein Protokoll der gelöschten Tweet -URLs, falls Sie sich auf dem Wayback -Computer anzeigen möchten.
• Fähigkeit, sich durch eine Liste von Proxy -Servern zu drehen, um 429 Fehler zu vermeiden. Sie müssen dies für Datensätze tun, die größer als etwa 800 Tweets sind.

Verwendung

Twayback -U Benutzername [Optionen]

 -u, --username                                        Specify target user's Twitter handle

--batch-size                                          Specify how many URLs you would like to 
                                                      examine at a time. Expecting an integer between
                                                      1 and 100. A larger number will give you a speed
                                                      boost but at the risk of errors. Default = 100

--semaphore-size                                      Specify how many urls from --batch-size you would 
                                                      like to query asyncronously at once. Expecting an integer
                                                      between 1 and 50. A larger number will give you a speed
                                                      boost but at the risk of errors. Default = 50

-from, --fromdate                                     Narrow search for deleted Tweets *archived*
                                                      on and after this date
                                                      (can be combined with -to)
                                                      (format YYYY-MM-DD or YYYY/MM/DD
                                                      or YYYYMMDD, doesn't matter)
                                                      
                                        
-to, --todate                                         Narrow search for deleted Tweets *archived*
                                                      on and before this date
                                                      (can be combined with -from)
                                                      (format YYYY-MM-DD or YYYY/MM/DD
                                                      or YYYYMMDD, doesn't matter)


--proxy-file                                          Provide a list of proxies to use. You'll need this for checking large groups of tweets
                                                      Each line should contain one url:port to use
                                                      The script will pick a new proxy from the list at random after each --batch-size       


Logs                                                  After checking a user's tweets but before you
                                                      make a download selection, a folder will be created
                                                      with that username. That folder will contain a log of:
                                                      <deleted-twitter-url>:<deleted-wayback-url> in case you needed them

Examples:
twayback -u taylorswift13                             Downloads all of @taylorswift13's
                                                      deleted Tweets

twayback -u jack -from 2022-01-05                     Downloads all of @jack's
                                                      deleted Tweets
                                                      *archived* since January 5,
                                                      2022 until now

twayback -u drake -to 2022/02/09                      Downloads all of @drake's
                                                      deleted Tweets *archived*
                                                      since the beginning until
                                                      February 9, 2022

twayback -u EA -from 2020-08-30 -to 2020-09-15        Downloads all of @EA's
                                                      deleted Tweets *archived*
                                                      between August 30, 2020 to
                                                      September 15, 2020

Installation

 git clone https://github.com/Mennaruuk/twayback

 cd twayback

 pip3 install -r requirements.txt

oder möglicherweise

 pip install -r requirements.txt

Führen Sie den Befehl aus:

 python3 twayback.py -u USERNAME

(Ersetzen Sie USERNAME durch Ihr Zielgriff).

Weitere Informationen finden Sie in den oben genannten Verwendungsabschnitt.

Screenshots

Screenshots werden mit Dramatikern fertig. Um Screenshots erfolgreich zu machen, befolgen Sie bitte die folgenden Schritte:

1. Öffnen Sie ein Terminalfenster.
2. Run: playwright install .

Fehlerbehebung

Die Standardgeschwindigkeitseinstellungen für --semaphore-size und --batch-size sind auf die schnellstmögliche Ausführung eingestellt. Reduzieren Sie diese Zahlen, um Ihre Ausführung zu verlangsamen und die Wahrscheinlichkeit von Fehlern zu verringern. Für die Überprüfung einer großen Anzahl von Tweets (> als 800) müssen Sie Web-Proxies und --proxy-file -Flagge verwenden

Dinge zu beachten

• Die Qualität der HTML -Dateien hängt davon ab, wie die Wayback -Maschine sie gespeichert hat. Einige sind besser als andere.
• Dieses Tool eignet sich am besten für Text. Möglicherweise haben Sie etwas Glück mit Fotos. Sie können keine Videos herunterladen.
• Wenn ein Konto ausgesetzt oder nicht mehr existiert, werden alle Tweets als gelöscht angesehen.
• Bei der Custom Date Range geht es nicht darum, wann Tweets erstellt wurden, sondern wenn sie archiviert wurden. Zum Beispiel könnte heute ein Tweet aus dem Jahr 2011 archiviert worden sein.