Website mit Python auslesen?

Hallo!

Ich würde gerne mit Python 3 alles Text einer Website auslesen.

Die Beispiele, die ich im Internet gefunden habe funktionieren, zeigen aber auch Text, den nicht einmal auf der Seite zu sehen ist. Zusätzlich wird mancher Text auf der Website gar nicht erst gefunden.

Ich brauche ein Program, was mir nur den Text gibt, den ich auch hätte, würde ich einfach alles Text auf der Seite Manuell kopieren.

1 Antwort

Dory1

21.12.2019, 14:29

Das ist je nach Website gar nicht so ohne weiteres möglich. Viele Websites laden Ihre Inhalte erst nach dem initialen Seitenaufruf per AJAX nach. Um diese seiteneigenen Skripte auch ausführen zu können, brauchst du ggf. zusätzliche Bibliotheken wie PyQt5. Alternativ könntest du natürlich versuchen nur genau diese Anfrage mit Python nachzubilden. Aufschluss über die geladenen Ressourcen gibt dir das Netzwerktab deiner Browser-Entwicklertools.

https://pypi.org/project/PyQt5/

https://stackoverflow.com/questions/8049520/web-scraping-javascript-page-with-python

Wie kann ich von einer Webseite Produkte auslesen und sie dann in Discord wieder geben? Aber um an das Produkt zu kommen, muss man erst einmal dies in der Suchleiste auf der Webseite eingeben. Und das alles in der Sprache Python.

...zur Frage

Python Wetterdaten auslesen?

Hallo, kennt sich einer aus mit dem Programm Python und kann mir da helfen ?

Wenn mir jemand wenigstens einen Ansatz zeigen könnte wäre das sehr hilfreich

...zur Frage

Wie Text Adventure Game mit Python erstellen?

Hallo ich möchte gerne ein Text Adventure Game erstellen.

Das aber nicht nur so einfach in Python mit ein bisschen Text und fertig.

Ich würde ganz gerne auch Graphiken / Bilder dazu haben und Knöpfe wo man dann rauf klicken kann um eine Auswahl für das Text Adventure zu treffen. (Also mit einem GUI)

Kann mir jemand sagen wie das am besten geht oder dazu ein Tutorial empfehlen oder eine Website mit Tutorials dazu oder auch eine Website wo man so ein Spiel erstellen kann und ich dann später auch den Python Code rausbekomme?

...zur Frage

Gibt es ein Tool (Crawler?) mit dem ich automatisch den gesamten Text einer Website auslesen kann?

also auch alle Unterseiten?

...zur Frage

Python CSV Datei herunterladen und auslesen?

Hallo zusammen, folgende Problemstellung:

in meinem Unternehmen gibt es ein Python Skript (mit ACM Modul), welches eine Tabelle, die auf einer Internetseite zu finden ist, ausliest und die entsprechenden Werte zurückgibt. Es ist ein recht komplexes Skript, aber durch die Kommentare verstehe ich einigermaßen worum es geht (habe absolut keine Erfahrung mit Python). Nun wurde die Seite allerdings so verändert, dass man die Tabelle nun als csv herunterladen muss und diese nicht mehr "direkt" auf der Seite zu finden ist.

Kann mir jemand erklären, wie ich in Python eine CSV Datei von einer Webseite herunterladen kann und die dortigen Werte auslesen kann?

Und sorry, das Skript kann ich euch leider nicht zeigen, mir reicht allerdings schon eine grobe Antwort.

Danke im Voraus

Liebe Grüße

...zur Frage

Python Tkinter Daten auslesen?

Ich habe dieses Fenster wo man nun Text in die jeweiligen Fenster eingeben kann.

Jedoch möchte ich diese nur "absenden" und an meine Konsole schicken, so dass ich diese im Nachhinein zur Datenbank hinzufügen kann.

Meine Frage nun, ob dieses machbar ist und wie?

Ob es dafür vielleicht einen Button command gibt, der den geschrieben Text an die Konsole sendet?

...zur Frage

Wie scrape ich das(Python-Selenium)?

Ich habe das Problem das ich den Text oder was auch immer das ist nicht gescrapt bekomme. Ich habe wirklich schon alles versucht. Der Text lässt sich auch nicht mit der Maus kopieren, noch ist er als String im HTML Code zu finden!

Den gemeinten Part den ich gerne gescrapt gehabt hätte ist unten markiert!

Die Seite wo ihr die das findet ist diese:(nicht gleiche Aufgabe aber gleiches Prinzip)

https://mathebattle.de/edu_randomtasks/training_show/480

Vielen Dank für Die Antworten!

...zur Frage

Webseiten Scraper in Python?

Ich würde gerne einen WebScraper programmieren, jedoch bekomme ich es nicht hin. Ich würde gerne von einer Webseite die Frequenz von unserem Stromnetz auslesen, bekomme aber als Ausgabe nur "None". Hier ist mein Python-Code:

from bs4 import BeautifulSoup

import requests, time

url = f'https://www.apg.at/de/markt/Markttransparenz/Netzregelung/Netzfrequenz'

page = requests.get(url)

soup = BeautifulSoup(page.content, 'html.parser')

table = soup.find('h3', attrs={'class':'mb-0 text-danger ng-tns-c64-1'})

print(table)

Ich habe vor 2 Stunden mit Python angefangen, habe aber bereits gute Kenntnisse in C++ und Java etc. Hat jemand eine Idee, wie ich das Problem lösen kann oder hat jemand bereits was ähnliches programmiert?

LG

...zur Frage

Wie nach Wortfolgen eines Strings suchen? Python?

Hallo,

ich habe einen String:

Satz = „Mein Handy Akku ist leer“

(Ich weiß natürlich dass die Anführungszeichen so falsch gesetzt sind, ist auf dem Handy schwer)

Nun will ich, dass Python (3.6) in einem Verzeichnis nach Text Dateien sucht, die so heißen wie ein Teil des Satzes.

Beispiel:

Akku ist leer.txt

Python soll also immer mindestens nach zwei, hintereinander folgenden Wörtern von einem Satz suchen. Wenn Python dann einen Treffer hat, sollte der Inhalt dieser Text Datei als Variable gespeichert werden. Wie ich den Inhalt speichern kann weiß ich, ich habe aber leider keine Idee, wie das andere funktionieren kann, deshalb frage ich hier die Experten ;)

Danke für jede hilfreiche Antwort!

...zur Frage

Python Problem?

Mein Programm soll einmal einen Text erfragen und danach eine Zahl im Falle das kein Text eingegeben wurde soll das Programm irgendetwas vorprogrammiertes wiedergeben.
das Programm muss mit Definitionen funktionieren am besten auch mit Schlüsselwort Funktionen da bin ich aber ganz weit von entfernt…

hier was ich bisher verursacht habe:

def Text():

try:

text = str(input(“Text Eingeben”))

except:

print(“kein Text eingegeben”)

Return text

def Zahl():

Zahl = int(input(“Zahl”))

return Zahl

Ausgabe= Text, Zahl

text*zahl

Ausgabe()

Die letzten Zeilen sind komplett falsch ich weiß aber ehrlich gesagt nicht wie es richtig gemacht wird weil die Erklärung einfach nicht existiert

Ich hab jetzt auch nicht auf groß und Kleinschreibung geachtet in meinem Programm jedoch schon also keine Sorge daran liegt’s nicht

...zur Frage

Pfeilzeichen funktionieren auf der Tastatur nicht (programmieren)?

Ich brauche zum programmieren mit Python die Pfeiltasten der Tastatur. Also nicht die Pfeiltasten mit dem man zb im Text nach links und rechts kann sondern die Pfeil Zeichen („<„) & („>“). Leider funktionieren die auf meiner Tastatur irgendwie nicht als Zeichen sondern übernehmen die selbe Aufgabe wie die normalen Pfeiltasten. Hab alles probiert aber verstehe nicht wie ich diese Zeichen hinbekomme. Finde auch nix dazu.

...zur Frage

IDLE Python für Anfänger

Hallo. Also ich wollte mal mit Python programmieren,doch leider kenne ich mich beim Programmieren null aus. Zuerst dachte ich, es wäre so ähnlich,wie eine Website zu codieren, ist anscheinend aber etwas komplexer.

Könnte mir jemand bei den Anfangsschritten helfen? Zum Beispiel will ich eine Art Passwort abfrage starten. Wenn jemand nicht das Wort eintippt, das ich haben will, soll da eben "Falsches Passwort" stehen. Wenn doch eben "Willkommen".

Leider verstehe ich den Unterschied zwischen print und rawinput noch gar nicht. Dieses print wäre dann dieses "Willkommen",dass dann erscheinen soll. Und das rawinput, wenn eine eingabe erfordert ist,ja?

Und wäre es dann zum Beispiel:

Password:reisekoffer raw_input"Dein Passwort bitt:" if eingabe=password: print "Willkommen" else: "Falsches Passwort"

Und wie kann man es einstellen,dass man dies als Schleife macht, falls das Passwort falsch ist? Wie kann man diese Schleife auf nur 3 Versuche reduzieren?

Ich hoffe, es findet sich jemand da draußen, der mir beim Verstehen vom Programmieren, helfen kann.

Vielen Dank im Voraus!!

...zur Frage

Texte einer Website downloaden möglich (mit JSON oder Python)?

Hallo!

Programmiere gerade ein Program, welches Texte (oder zum bsp. Bilder) aus dem Internet ziehen und in eine .txt datei packen kann. Weiß jemand wie man das machen könnte?

Danke schonmal im Voraus! ;)

PS: Postet gerne eure Codes dazu!

...zur Frage

Kann mir wer meinen Fehler erklären bzw. diesen Berichtigen (Python)?

Hallo Leute!!

Ich muss ein Programm für die Schule in Python schreiben (ich bin totaler Anfänger...ich bitte um Rücksicht;D) Doch dann bekomme ich eine Fehlermeldung und weiß nicht, was ich falsch gemacht habe...

P.S Ich benutze Python 3.4.2

Das Programm:

import tkinter

Material = tkinter.IntVar()
Material.set(0)

#Funktion der Buttons (Ende)
def ende():
    main.destroy()

#Hauptfenster
main = tkinter.Tk()

#Elemente/Objekte
lb = tkinter.Label(main, text = "Hier koennen Sie das Material fuer den Boden Ihres Hauses auswaehlen...")
RButton_Stein = tkinter.Radiobutton(main, text="Stein", variable=Material,value=1)



#Anzeigen der Elemente/Objekte
lb.pack()
RButton_Stein.pack()

Button_Ende = tkinter.Button(main, text = "Auswaehlen", command = ende)

Button_Ende.pack()

#Endlosschleife
main.mainloop()

print(Material)

Die Fehlermeldung (Shell):

 Traceback (most recent call last):
  File "I:\Technik\Tkinter.py", line 3, in <module>
    Material = tkinter.IntVar()
  File "C:\Program Files\Python35\lib\tkinter\__init__.py", line 351, in __init__
    Variable.__init__(self, master, value, name)
  File "C:\Program Files\Python35\lib\tkinter\__init__.py", line 233, in __init__
    self._root = master._root()
AttributeError: 'NoneType' object has no attribute '_root'

...zur Frage

Was möchtest Du wissen?

Deine Frage stellen