Google suche (python)?

Hi, wie suche ich mit Python etwas auf Google? (am besten mit Selenium)

Es sollen alle Links die man finden kann gespeichert werden. Also wenn man YouTube eingibt dann z.B. https://youtube.com https://wikipedia.org/youtube

Und so weiter...

2 Antworten

deineSenfgurke

01.05.2021, 00:27

Der http client ist der Trick aber:

Google limmitiert deine suchanfragen die mögen keine Bots.

https://docs.python.org/3/library/http.client.html#module-http.client

Lukasistein

01.05.2021, 00:43

Ist noch leichter als du glaubst.

So ist die Url aufgebaut (Nach dem man etwas gesucht hat):

https://www.google.com/search?q=Hallooo&oq=Hallooo&sourceid=chrome&ie=UTF-8

Gut eigentlich noch bisschen anders das Spielt jetzt aber keine Rolle so reicht das erstmal.

In Python hast du wahrscheinlich sowas:

keyword = input("Suchen: ")

Dann machst du Chrome auf:

webbrowser.open_new_tab("url......"+keyword+"urll......")

VOLLSTÄNDIGER CODE:
https://paste.horlboge.de/iliqimeqev.py

Woher ich das weiß:Hobby

pommeskind412

Fragesteller

01.05.2021, 08:01

Vielen Dank, aber wie bekomme ich die URLS die bei dieser Suche gefunden wurden?

techniker68

01.05.2021, 10:13

@pommeskind412

Hi, ich kann nicht den Verlauf lesen.

Einfach draufklicken oder googeln.

Mario

Ähnliche Fragen

Python Selenium XPath nach Inhalt?

Hallo zusammen
Ich programmiere gerade einen Bot mit Python Selenium und möchte ein Element nach dessen Inhalt finden. Nun habe ich driver.find_element_by_xpath("//*[contains(text(), '1')]"). Nun sollte dieses Element angeklickt werden, doch es funktioniert nicht. Als error Meldunug kommt: 'list' object has no attribute 'click'.
Ich befürchte, dass nicht dieses div objekt ausgewählt wurde, welches ich wollte. Wie könnte ich das beheben?

...zur Frage

Python Selenium schließt sich?

Wenn ich dieses Skript Ausführ:

öffnet sich Chrome und auch YouTube wird aufgerufen.

Aber nach ca.2-3 Sekunden nachdem YouTube geöffnet wurde schließt sich Chrome.

Es kommt auch keine Fehlermeldung

Außer diese Warnung:

Ich hoffe ihr könnt mir helfen

...zur Frage

Python erkennt installiertes Modul nicht?

Moin zusammen,

ich möchte Python prüfen lassen, ob das Selenium Modul installiert ist:

#!/bin/python3

import sys
import pip
import os
import re

if "selenium" in sys.modules is True:
    print("Selenium ist installiert.")
else:
    print("Selenium ist nicht installiert...")

Ich habe das Modul mit pip bzw. pip3 installiert, aber bei jeder Ausführung des Scripts sagt er mir, dass Selenium nicht installiert wäre. Hat jemand eine Idee, woran das liegen könnte? Ich habe Selenium mit pip und pip3 installiert, er müsste es doch also eigentlich finden...?

...zur Frage

python selenium-browser mit bestimmter URL öffnen?

Hallo python und programmierfreunde allgemein.

Ich bin neulich auf Python Selenium gestoßen und habe ein paar Probleme bei der Verwendung damit.
Eigentlich will ich erst mal nur den Chrome Browser starten mit einem bestimmten Link.
Dazu habe ich:

from selenium import webdriver
driver = webdriver.Chrome()
driver.get('http://www.google.de')

stehen.

jetzt schmiert der aber schon bei der zweiten Zeile ab.

Was funktioniert ist:

from selenium import webdriver
driver = webdriver.Chrome("C:\Program Files\Google\Chrome\Application\chrome.exe")
driver.get('http://www.google.de')

Aber, Chrome öffnet dabei immer ein neuen Browser und auch immer nur mit der Startseite und nicht mit mit dem angegebenen link.

Ich würde gerne, wenn der Browser schon offen ist einen neuen Tab öffnen, was aber nicht so wichtig ist, wichtige wäre es, das er den richtigen Link öffnet.

Freue mich über Hilfe und stehe für Fragen offen.
Liebe Grüße

...zur Frage

Wie Iframe identifizieren?

Hallo,

ich würde gerne mit Python Selenium auf web.de gehen und mich dort dann anmelden. Der Basis Code sieht bisher so aus:

from selenium import webdriver
import time
driver = webdriver.Chrome('C:/Users/.../Desktop/Python/chromedriver.exe')
driver.maximize_window()
driver.get('https://www.web.de/')

Das Problem dabei ist jetzt, dass das hier aufgeht: https://web.de/consent-management/ . Jetzt frage ich mich zunächst einmal, weshalb das jedes mal aufgeht, wenn ich den Code ausführe, aber nur ein einziges mal erschien, als ich das erste mal mit dem Gerät auf web.de war?!

Als nächstes wollte ich dann einfach den Button "Zustimmen und weiter" klicken lassen. Den Button habe ich durch:

button = driver.find_element_by_xpath('//button[text()=" Zustimmen und weiter "]')

gespeichert. .click() löst aber nichts aus. Jetzt habe ich gesehen, dass sich der button innerhalb eines iframes befindet. Die class des iframes lautet: 'permission-core-iframe' , innerhalb befindet sich dann noch mal ein iframe aber ohne id und class. Darin findet man dann zwei button unter anderem den für "Zustimmen". Wie komme ich denn jetzt zum eigentl. Login?

...zur Frage

Python Selenium button klicken?

from selenium import webdriver

file = 'chromedriver.exe'
driver = webdriver.Chrome(file)

driver.get('https://stin.to/MEIN CHAT ROOM HIER')
time.sleep(1)
button = driver.find_element_by_class_name('form-check-input')
button.klick()

Hey Community! ich habe an einem Selenium bot gebastelt, der sich in einen Chat Room einloggen soll, dabei soll aber ein button geklickt werden, und dann soll ein text eingegeben werden wie der benutzername lautet (habe das schon geschafft, steht aber hier nicht im code). bin zu faul das sonst immer zu machen deswegen tu ich es mit diesem script. aber es gibt mir einen fehler, vll könnt ihr es mal probieren und mir mit dem fix helfen. LG Max

...zur Frage

Python datei in Macbook terminal finden?

Hey,

ich habe mir eben eine Python datei auf meinem Macbook, in meinem IcloudDrive in einem Ordern gespeichert.

Somit wäre der Dateipfad : Icloud Drive > Ordner... >Pythondatei.py

Wie gebe ich diesen Dateipfad in mein Terminal ein, damit sich meine Python Datei mit dem Terminal verbindet?

...zur Frage

wie memory leak in python script finden?

Hallo, ich hab ein python script auf einen raspberry pi 4 8gb laufen welches im loop ausgefuehrt wird und von tag zu tag immer mehr memory nutzt.

das script nutzt folgende imports:

import time

from selenium import webdriver

from selenium.webdriver.common.by import By

from random import *

import secrets

from selenium.webdriver.common.keys import Keys

import praw

from selenium.webdriver.firefox.options import Options

from selenium.webdriver.support.ui import WebDriverWait

from selenium.webdriver.support import expected_conditions as EC

ich hab auch schon memory profiler ausprobiert, indem ich alles was im loop ausgefuehrt wird in einer funktion gespeichert hab und diese funktion im loop mit memory profiler zeile fuer zeile nach der memory nutzung suchen lassen habe aber das kommt bei jeder zeile nur 26.7MiB Nutzung raus.

z.b.

497 26.7 MiB 0.0 MiB 1 wait = randint(waita, waitb)

Ich hoffe mir kann jemand helfen wie ich genau heraus finden kann was so viel memory nutzt. <3

...zur Frage

PermissionError: [WinError 5] Zugriff verweigert?

Hi ich weiß nicht wie ich das Problem lösen soll. Ich führe Python als Administrator aus. (Win 7)

Code:

from selenium import webdriver

import time

url = 'https://youtube.com/'

driver = webdriver.Chrome(r'C:\Users\Lars\Downloads\chromedriver_win32')

driver.get(url)

Fehler:

Traceback (most recent call last):

File "C:\Program Files (x86)\Python37-32\lib\site-packages\selenium\webdriver\common\service.py", line 76, in start

stdin=PIPE)

File "C:\Program Files (x86)\Python37-32\lib\subprocess.py", line 775, in __init__

restore_signals, start_new_session)

File "C:\Program Files (x86)\Python37-32\lib\subprocess.py", line 1178, in _execute_child

startupinfo)

PermissionError: [WinError 5] Zugriff verweigert

During handling of the above exception, another exception occurred:

Traceback (most recent call last):

File "C:\Users\Lars\Desktop\emails.py", line 5, in <module>

driver = webdriver.Chrome(r'C:\Users\Lars\Downloads\chromedriver_win32')

File "C:\Program Files (x86)\Python37-32\lib\site-packages\selenium\webdriver\chrome\webdriver.py", line 73, in __init__

self.service.start()

File "C:\Program Files (x86)\Python37-32\lib\site-packages\selenium\webdriver\common\service.py", line 88, in start

os.path.basename(self.path), self.start_error_message)

selenium.common.exceptions.WebDriverException: Message: 'chromedriver_win32' executable may have wrong permissions. Please see https://sites.google.com/a/chromium.org/chromedriver/home

...zur Frage

Selenium Python Elemente finden durch klasse finden?

Ich habe folgendes Problem ich möchte einen Bot programmieren der mich auf einer Seit anmeldet und ein paar Sachen dort für mich macht während ich etwas anderes mache, jedoch weiß ich nicht wie ich den Button finden soll per Klasse.

Button = driver.find_element_by_class_name()

Habe ich benutzt dort dann den Klassennamen eingetragen, jedoch gibt es diese Klasse öfter und wenn ich

Button.click()

mache passiert nix, der Button hat sonst keine ID oder ähnliches

er hat eine <span data-v-(Zahlenfolge)
bin leider nicht so im ganzen HTML ding drin kann nur die basics, habe python erst seit heute gelernt also ist das auch noch nicht so gut.
Freue mich auf jede Antwort

...zur Frage

Python Selenium xpath ul / li?

Hallo Zusammen,

ich versuche aktuell über Selenium eine Website auszulesen. Zum Auslesen nutze ich Selenium xpath. Es geht um folgende Bespielseite: https://www.westernwelt.com/Cowboyhut-3X-von-Resistol-aus-Filz_1

Der von Chrome kopierte xpath lautet:
//*[@id="product-offer"]/div[2]/div/div[2]/div[2]/div/dl/dd[2]/div/div/div/ul/li[3]/a/span/span/span

Sobald in diesem Pfad ein ...ul/li/... vorkommt bekomme ich keine Ergebnisse mehr. Wo ist hier mein Denkfehler?

from selenium import webdriver
from selenium.webdriver.common.by import By#

url= 'https://www.westernwelt.com/Cowboyhut-3X-von-Resistol-aus-Filz_1'

driver = webdriver.Chrome()
driver.get(url)

xpath = '//*[@id="product-offer"]/div[2]/div/div[2]/div[2]/div/dl/dd[2]/div/div/div/ul/li[3]/a/span/span/span'
elements = driver.find_element(by=By.XPATH, value=xpath)

...zur Frage

Raspberry Pi Programm (Python) Google Home kompatibel machen?

Hallo, ich habe 2 Lampen in meinem Zimmer von Philips Hue und eine von Nanoleaf, doch die Hauptlampe von mir an meinem Schreibtisch ist nicht smart, ich habe einen Infrarotsensor in sie mal gebaut und habe über eine selbst programmierte App einen Webserver angesprochen, welcher auf Python Basis (FastAPI) läuft und dann einen Infrarot sensor über die Rasp Schnittstellen angesprochen hat, der hat dann die Lampe an/aus gemacht und gedimmt.
Durch meinen neulich erworbenen Google Nest Hub ist mir jetzt der Wille gekommen, die Lampe, also das Python Programm quasi irgendwie google home kompatibel zu machen, sodass ich "Ok Google, mache Hauptlampe an" oder auch "Hey Google, alle Lampen aus" sagen kann.

Wisst ihr, wie ich sowas machen kann?
Bzw. wo ich YouTube Videos und Blogbeiträge dazu finde? (Bevorzugt Deutsch, aber englisch ist auch ok)

Liebste Grüße

...zur Frage

Warum benutzen viele Firmen die Programmiersprache Python?

Hallo Leute,

ich bin ein Anfänger in Sachen programmieren. Ich habe mich etwas über die verschiedenen Programmiersprachen erkundigt, und hab gesehen, dass viele Unternehmen Python für ihre Anwendungen benutzen, darunter Google, Youtube, Instagram und Spotify.

https://www.hartmannsoftware.com/Blog/Articles_from_Software_Fans/Most-Famous-Software-Programs-Written-in-Python

Nun, die Programme bzw Apps die der Nutzer herunterlädt sind damit wohl eher nicht gemeint, sonst bräuchte ja jeder einen Python Interpreter installiert. Ich schätze es geht hier eher über die Webserver oder die Firmen benutzen Python zur Datenauswertung. Aber warum Python?!? Python wird doch nicht kompiliert und ist deshalb langsamer, warum sollte gerade Google es zur Datenauswertung verwenden?!? Oder kompilieren die ihre Python Programme? Warum benutzen die dann aber keine Sprache, die auf das kompilieren ausgelegt ist?

...zur Frage

Wie kann man alle Buttons auf einer Website mithilfe eines Scripts erkennen und den class name herausfinden (am besten in python)?

Ich würde gerne mit Selenium alle Buttons auf einer Website öffnen.

Das einzige was mir noch fehlen würde ,währe alle Buttons zu finden und den class name herauszufinden.

Am besten wäre es in python , geht aber auch in anderen Sprachen z.B. bash,java ...

Danke in vorraus

...zur Frage

Was möchtest Du wissen?

Deine Frage stellen