Python requests Login

03/15/2016 23:24 Benjihz#1

Hallo,
Versuche mich derzeit in Python und bin gerade, der �bung wegen, dabei ein Skript zu schreiben, mit dem man seinen Zalando Acc verwalten/auslesen kann.
Allerdings h�nge ich schon am LogIn des ganzen. Den Request mache ich �ber requests. Ich glaube das Problem ist, dass der Cookie einfach nicht �bergeben wird. Immer wenn ich nach dem LogIn �ber POST auf das Benutzerkonto zugreifen will(GET), bin ich nicht eingeloggt. Auch wenn ich die Seite direkt nach dem LogIn abfrage, bin ich nicht eingeloggt.

Code:

import requests
with requests.Session() as c:
    url = 'https://www.zalando.de/login/'
    USERNAME = "xxx"
    PASSWORD = "xxx"
    #login_data = dict(email = USERNAME, password = PASSWORD, Referer = "https://www.zalando.de/login/")
    payload = {'email': 'xxx', 'password': 'xxx', 'Referer' : 'https://www.zalando.de/login/'}
    get = c.get(url = url)
    post = c.post(url = get.url, params=payload)
    #print(post.text)
    
    

    page = c.get("https://www.zalando.de/benutzerkonto/", params=payload, cookies=c.cookies)
    print (page.text)

Mir ist aufgefallen, dass wenn ich per post.url die URL der POST-Abfrage abfrage, "www.zalando.de" rauskommt und NICHT "www.zalando.de/login". Wieso? Wieso leitet er wohl auf auf zalando.de?

MfG

03/16/2016 01:32 alpines#2

Du sendest nicht genug Daten, schau dir das hier mal an

Code:

$hSession = _WinHttpOpen("Mozilla/5.0 (Windows NT 6.3; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.111 Safari/537.36")
$hConnect = _WinHttpConnect($hSession, "www.zalando.de", 443)

Local $sHTML = _WinHttpSimpleSSLRequest($hConnect, "GET", "")
Local $aSrcPageRegEx = StringRegExp($sHTML, "_sourcePage"" value=""(.+?)"" \/>", 3)
Local $aXTKRegEx = StringRegExp($sHTML, "name=""_xtk"" value=""(.+?)""\/>", 3)
Local $a__fpRegEx = StringRegExp($sHTML, "__fp"" value=""(.+?)"" \/>", 3)

Local $sData = "email=" & StringReplace($aUser[0], "@", "%40") & _
	 "&password=" & $aUser[1] & _
	 "&sourceId=account" & _
	 "&softLogin=true" & _
	 "&login=" & _
	 "&_sourcePage=" & $aSrcPageRegEx[1] & _
	 "&_xtk=" & $aXTKRegEx[0] & _
	 "&__fp=" & StringReplace($a__fpRegEx, "=", "%3D")

$sHTML = _WinHttpSimpleSSLRequest($hConnect, "POST", "login", Default, $sData)
If StringInStr($sHTML, "Abmelden") Then

03/16/2016 03:23 MrDami123#3

Man hab ich mir ne Weile lang an Logins die Z�hne ausgebissen. :P

Jetzt wo ich wei� wie die ganze Suppe funktioniert, kann ich dir das gerne schnell erkl�ren.

Headers:
Dein Browser sendet standardm��ig spezifische Headers mit jeder Anfrage mit. In deinem Browsereinstellungen oder mit Addons kannst du diese �ndern.
Zum Beispiel verwende ich ein Addon um meinen User-Agent zu verschleiern.

Der Server lie�t die Infos im Header und reagiert entsprechend darauf.
Beispielsweise hat paypal.com meine Anfrage blockiert mit der Aussage "Deine Browserversion ist zu alt und enth�lt Sicherheitsl�cken.", weil mein User-Agent-Verschleierer paypal.com gesagt hat ich benutze Chrome Version 28.

Wenn du Anfragen mittels Software baust, musst du ggf. ben�tige Headers setzen, damit der Server deine Anfrage akzeptiert. Sehr viele Server ignorieren Anfragen die nicht von Browsern stammen.

Parameter und Formulardaten:
In 'requests' gibt es einen Unterschied zwischen Parametern und Formulardaten. Bei einer POST Anfrage verwendet man 'data=' statt 'params='.

Code:

>>> r = requests.post('http://httpbin.org/post', data = {'key':'value'})

>>> payload = {'key1': 'value1', 'key2': 'value2'}
>>> r = requests.get('http://httpbin.org/get', params=payload)

Cookies:
Wenn du 'requests.Session()' verwendest, werden Cookies automatisch gespeichert und verwendet.

Sitzungsvariablen:
Wenn du eine neue Sitzung startest ('request.Session'), werden in der Regel serverseitig neue Variablen spezifisch f�r diese Sitzung erstellt, darunter fallen auch einige Cookies.
Diese Sitzungsvariablen befinden sich auch in Formularen. Sie dienen unter anderem der Sicherheit.

Wie geht man jetzt am Besten vor um den Login nachzustellen?

Mittels Browser einloggen und Anfrage analysieren
Daten aus Anfrage im Skript einbauen
Sitzungsvariablen ermitteln und einbauen
POST Anfrage absenden und Erfolg ermitteln

Browser Anfrage:

Spoiler

Hier ein Skript mit Kommentaren:

Spoiler

Code:

import requests
from lxml.html import fromstring
import re

# Headers. Kann man sich aus den Browser kopieren. Welche ben�tigt werden, muss man ausprobieren.
# Ggf. auch keine.
headers = {
    'User-Agent': 'BOT',
    'Host':'www.zalando.de',
    'Origin':'https://www.zalando.de',
    'Upgrade-Insecure-Requests':'1',
    'Accept':'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
    'Accept-Encoding':'gzip, deflate',
    'Accept-Language':'de-DE,de;q=0.8,en-US;q=0.6,en;q=0.4',
    'Cache-Control':'max-age=0',
    'Connection':'keep-alive',
    'Content-Type':'application/x-www-form-urlencoded',
    }

# Erzeuge Sitzung und setze die Sitzungsheaders - werden dann immer mitgesendet.
s = requests.Session()
s.headers = headers

# Downloade die Loginseite um die Sitzungsvariablen zu ermitteln
# Sitzungsvariablen sind bei jeder Sitzung neu
page = s.get('https://www.zalando.de/login')

# Ich verwende 'fromstring' aus der lxml Bibliothek um die Formulare (html forms)
# aus dem Seitenquelltext auszulesen

# Suche nach richtigem Formular
# Unserer Loginformular ist das Zweite auf der Seite - das erste ist die Suche 
for form in fromstring(page.text).forms:
    print(form.form_values())
    print('\n\n')


# Loginformular ausw�hlen und mittels 'form_values()' sitzungsspezifische Formularvariablen
# auslesen
loginform = fromstring(page.text).forms[1]
formvalues = dict(loginform.form_values())

# Zus�tzlich ben�tige Formularvariablen setzen - ausgelesen aus Browser Anfrage
formvalues['email'] = 'email'
formvalues['password'] = 'password'
formvalues['login'] = ''

# Formularvariablen in Anfrage setzten und URL vom Formular verwenden
s.post('https://www.zalando.de/login', data=formvalues)

# Seite mit loginspezifischer Information aufrufen und checken ob info da ist
# Check auch mit print(r.text) und durchsuchen
r = s.get('https://www.zalando.de/benutzerkonto/')

if re.search(r'Vorname Nachname', r.text):
    print('Login successful!')