Virtuelle Python Maschine?

Hallo

Ich habe ein Python Skript gemacht, dass Webscraping betreibt um für eine KI Daten zu sammeln. Um aber einen ausreichend grossen Datensatz zu bekommen muss das Skript schon etwa eine Woche Laufen. Dafür bräuchte ich eine virtuelle Maschine. Meine Frage ist jetzt ob es auch eine Website oder so gibt, wo man einfach ein Python Skript ausführen kann ohne eine Virtuelle Maschiene zu haben? Ich brauche ja praktisch keine Leistung mit meinem mikrigen Prozess.

Danke ^^

3 Antworten

crc32

23.02.2021, 15:00

Mach es mit dem multiprocessing Modul und 10000 parallelen Requests!

Das schafft jeder Rechner und jede popelige DSL-Leitung.

Dann dauert es statt einer Woche nur noch ziemlich genau eine einzige Minute!

Mach ich auch immer so!

Viel Spaß! :)

PS: Nicht das multithreading Modul nutzen, wegen dem GIL! Das macht dir sonst die ganze Performance zunichte. Ab 1000 parallelen Verbindungen muss es das multiprocessing Modul sein!

Zum synchronisieren und füttern der herunter zu ladendenden URLs reicht eine queue völlig aus.

Wenn du allerdings nur von einem einzigen Server runterlädst, verzichte lieber auf Parallelität. Das wird sonst evtl. als Angriff missverstanden.

Woher ich das weiß:Berufserfahrung

Friendlymushrom

Fragesteller

23.02.2021, 16:22

Das problem ist, dass ich Aktien Kurse brauche. Die muss ich halt zwingend in einem bestimmten Zeit abstand beziehen

alfredo153

Von gutefrage auf Grund seines Wissens auf einem Fachgebiet ausgezeichneter Nutzer

Computer, programmieren, Informatik

23.02.2021, 08:11

Bei einigen Cloudanbietern gibt's Free Tiers, etwa AWS:

Das kostenlose Kontingent von AWS umfasst 750 Stunden Linux und Windows t2.micro-Instances, ( t3.micro für die Regionen, in denen t2.micro nicht verfügbar ist) jeden Monat für ein Jahr. Um innerhalb des kostenlosen Nutzungskontingents zu bleiben, verwenden Sie nur EC2-Micro-Instances.

https://aws.amazon.com/de/ec2/pricing/

Oder auch bei Google: https://cloud.google.com/free/docs/gcp-free-tier?hl=de

Hairgott

Von gutefrage auf Grund seines Wissens auf einem Fachgebiet ausgezeichneter Nutzer

Computer

22.02.2021, 23:49

Hol dir nen raspberry Pi und lass den laufen.

Ich kenne leider keine solchen Webdienst.

Wie kann ich eine Python-Datei (.py) als root ausführen?

...zur Frage

Wie kann ich mein Python Skript in Windows Powershell ausführen?

Hallo, ich will mein Python Skript in Windows Powershell ausführen aber es tritt immer die folgende Nachricht aus.

Was kann ich tun?

Danke

...zur Frage

Wieso kann VSCode Python nicht ausführen?

Wenn ich in VSCode versuche, Python Skripte auszuführen, kommt nur dieses Fenster, sonst passiert nichts.

Ich habe in der letzten Zeit vor allem mit HTML/JavaScript/PHP gearbeitet und denke, dass in der Konfiguration etwas falsch ist und VSC quasi versucht "Python wie z.B. JS auszuführen" (ich weiß das klingt dämlich, korrigiert mich wenn ich falsch liege:)). Weiß jemand was ich machen muss, um wieder normal Python Skripte ausführen zu können?

Schon mal Danke im Voraus :D

...zur Frage

Mit PHP Python-Skript ausführen?

Hallo! Ich bin etwas am Verzweifeln. Ich möchte auf einem Raspberry Pi über einen Webserver ein PHP-Skript ausführen, welches ein Python-Skript ausführt und ein paar Lampen zum Leuchten bringt.

Meine Python-Skripte laufen 1A. Ich habe jetzt einiges ausprobiert und mein Resultat bisher ist, dass er mir die Python-Datei herunterlädt (fragt mich nicht, wie ich das angestellt habe ...).

Hier mein Code:

HTML Datei:

<html DOCTYPE!>
<form method="POST" action="ampel.php"
  <input type="submit" name="ampel">
</form>

Die PHP-Datei:

<?php

  if (isset($_POST['ampel'])) {
    exec('python ampel.py', $output, $return_var);
    echo("Ampel läuft");
  }

?>

Das Python-Skript ist, denke ich, eher unnötig. Falls es benötigt wird, poste ich es natürlich.

Zudem sei gesagt:

sudoers wurden angepasst, damit www die Skripte ausführen darf (und auch wirklich nur eben diese
Schreibrechte, Ausführen darf jeder
PHP error.log sagt gar nichts

Dankeschön. :)

...zur Frage

Virtuelle Maschiene Win10 Standard Passwort?

Hey :) Ich habe mir heute zum 1. Mal Windows 10 auf einer virtuellen Maschine heruntergeladen und gestartet jetzt aber bei der Login Seite von Windows steht dort passwort eingeben, weiß jemand das standart passwort für die virtuelle Maschine:)

...zur Frage

Python Skript installieren?

Hey,

wenn ich ein Python Skript mit vielen Abhängigkeiten habe, und ich möchte dieses pythonscript jetzt aber jm. mitgeben, der nicht in der lage ist mit pip mal eben kurz diese abhängigkeiten zu installieren, auf dessen pc kein python installiert ist, wie kann ich das anstellen?

Folgende Möglichkeit habe ich gefunden:

In eine EXE konvertieren | Problem: Exen lassen sich nur unter windows ausführen. Oder mit wine, aber dann funktioniert vieles auch nicht richtig.

Ich habe folgende Idee:

Jar Datei erstellen. Dann lässt es sich unter android, linux, windows und mac OS ausführen.

Was meint ihr?

...zur Frage

Wie führe ich ein Python Skript automatisch aus nach dem sich mein Laptop gestartet hat (Windows)?

Hallo, habe über den Python ein Skript fertig gestellt in dem ich ein Fenster erstellt habe. Diesen Fenster will ich nach dem Start meines Laptops automatisch ausführen lassen. Soweit ich es weiß kann ich es über den Auto Start ausführen allerdings gibt der mir nur den Skript wieder. Was müsste ich machen damit ich den Fenster öffnen lassen kann?

...zur Frage

In einem Python Modul ein anderes Python Modul über cmd aufrufen?

Hallo ich möchte über ein Python Script ein anders python Script ausführen und zwar über den CMD Befehl

Das skript zum ausführen des CMD Befehlst sieht so aus. Das python script hi.py printet einfach nur einen stirng

import os

os.system('cmd /k "C:\Users\Name\Desktop>python hi.py"')

beim auführen des scripts bekomme ich aber die Meldung Der Befehl "C:\Users\Name\Desktop" ist entweder falsch geschrieben oder konnte nicht gefunden werden.

kann mir jemand weiterhelfen?

...zur Frage

Python Informatik -> invalid Syntax?

if __name__ == '__main__':

a = [0, 1, 2, 3]

print(f"Hallo Liste a = {a}")

Wenn ich dieses Skript ausführe kommt die Fehlermeldung:

Was muss ich ändern damit das Skript funktioniert und ausgeführt wird?

...zur Frage

Raspberry pi python script automatisch starten?

Ich möchte wenn mein Raspberry Pi hochgefahren ist direkt automatisch ein Python Skript ausführen lassen wie kann ich das bewerkstelligen?

...zur Frage

Werden Programme ausgeführt, wenn der PC gesperrt ist?

Hallo.

Wenn ich mich bei Windows 11 einlogge, dann ein Python-Skript ausführe und dann WIN + L (sperren) drücke, wird dann das Skript auch noch ausgeführt?

Danke im Voraus.

TheWuschelGang

...zur Frage

VMware Virtuelle Maschiene eine eigene IP Zuweisen?

Hallöchen zusammen, ich habe mir vor kurzem eine Virtuelle Maschine mit Ubuntu auf VMWare eingerichtet, meine frage ist ob es möglich ist dieser VM eine eigene IP zuzuweisen damit so die Maschine im Router angezeigt wird für z.b. Port Forwarding

danke so wie immer im voraus für antworten

...zur Frage

PowerShell Skript lässt sich auf Windows 10 Computer nicht ausführen, was muss ich genau tun um ausreichend Berechtigung zu erhalten?

Ich verwende Hyper-V unter Windows 10 zur Virtualisierung und möchte mittels PowerShell Skript meine Virtuellen Maschinen auf einen vorhandenen Prüfpunkt zurücksetzen. Der Speicherort der VM's ist Lokal.

Wenn ich das PowerShell Skript als Administrator ausführe erhalte ich folgende Fehlermeldung:

Sie besitzen nicht die erforderliche Berechtigung für diese Aufgabe. Wenden Sie sich an den Administrator der Autorisierungsrichtlinie für Computer "DESKTOP-PC".

Mein PowerShell Skript:

Die Fehlermeldung:

Frage steht oben.

...zur Frage

python cmd command aufführen?

hi Leute, ich würde gerne in meinem Python Skript einen CMD command mit Variablen aus dem Python Skript ausführen, weiß aber nicht wie.

Etwa so sieht das Skript aus:

centerX = (minX + maxX) / 2

centerY = (minY + maxY) / 2

dann soll es so weiter gehen:

C:/User/.../destop/jump!.exe move centerX, centerY

wie kann ich meine variablen einbauen?

...zur Frage

Was möchtest Du wissen?

Deine Frage stellen