Projekt Dashboard mit SQL, PHP, JS, HTML?

Hallo,

und zwar habe ich ein Projekt in dem ich SQL Daten abfrage, bearbeite und in einem Webinterface visualisiere (quasi eine Art Dashboard). Aktuell habe ich ein PHP Skript geschrieben, dass die Datenbank abfrägt aber in einer Schleife ziemlich oft ein neues dynamisches SQL Query erstellt, um bestimmte Werte in der Datenbank abzufragen. Das dauert relativ lange, da teilweise nur einzelne Werte durch die SQL Query zurückkommen und quasi jedes Mal ein neuer Datentunnel aufgebaut wird.

Jetzt wäre meine Frage, ob es auch eine Möglichkeit gibt die Datenbank einmal komplett abzufragen und anschließend beim Client zu bearbeiten und auszuwerten, indem man die Daten beispielsweise in ein Javascript Array oder ähnliches schreibt. Ein paar Werte muss ich erst errechnen bevor sie dargestellt werden, weshalb ich um Javascript wahrscheinlich nicht herumkomme.

Und wären Objekte in Javascript bei der Abfrage hilfreich?

Bin noch ziemlich neu auf diesem Gebiet und bin um jede Antwort dankbar.

3 Antworten

Vom Fragesteller als hilfreich ausgezeichnet

TechPech1984

Nutzer, der sehr aktiv auf gutefrage ist

im Thema HTML

22.12.2020, 10:31

Generrell leider immer eine Anwendungsfall frage. Hole ich mir alle Datensätze und berechne sie dann mit der Programmiersprache ... geht bei wenig datenmengen sehr gut . Bei meinen 680 000 Datenstäzen hab ich da ein Problem :) das wird auch nicht besser den die übertragung , wenn ich das z.b. auch noch vom JavaScript Frontend im Browser abarbeiten will dauert es , mach ich es auf dem server , verbraucht das platz , bei vielen besuchern nicht unbedingt gewünscht. Es gibt caching systeme die selbige ergebnisse vorhalten , es gibt natürlich auch Views in SQL die wenn nix neues dazu kommt die Lösung quasi schon bereithalten als View Tabelle , dann ist es nur eine Abfrage . Auch die Art wie Du dein SQL Query aufbaust , eine Liste von ID's mit einer For Schleife zu iterrieren und jeweils ein SQL Query pro ID zu erzeugen ist wohl meist nicht sinnvoll weil man das gleiche mit übergabe der ID liste und WHERE IN Liste gleich alle Datensätze bekommt (achtung aufpassen ab welcher Listen größe bei der Server conifg da endet (bzw geändert werden muss).

Kann man also so pauschal nicht sagen . Praktisch ist es aber wenn du auf dem Server das Script mit vielen Querys machst jetzt nicht unbedingt ein Problem , solange sie halt nciht weiter zu optmieren sind. Brauche ich halt 15 abfragen weil sie aus vielen unterschiedlichen und bedingten abfreagen nun einmal resultieren , dann ist das so :) kann man sich wünschen das es anders wäre aber ein Einzeiler ist halt nicht immer zu machen .

bensf

Fragesteller

22.12.2020, 10:49

Hallo,

okay. Es gibt verschiedene Ansichten und je nach Event auf der HTML Seite könnte man die Daten quasi neuladen. Dabei geht es um Abfragen die jeweils maximal 1000 Zeilen oder vielleicht auch etwas mehr zurückgeben. Dabei ist eine Spalte der eigentliche Wert mit dem ich Berechnungen machen muss und bei den anderen geht es nur um Zuordnungen wo dieser Wert hingehört. Würde es in diesem Fall Sinn machen die Daten in ein Array zu schreiben?

Wie genau würde das mit den Views in SQL funktionieren? Ich habe schon eine View erstellt dabei habe ich aber nur 3 Tabellen miteinander verknüpft und mir nur die Spalten die ich haben möchte anzeigen lassen.

TechPech1984

22.12.2020, 10:57

@bensf

Wie gesagt, probiere es aus , ich hab mal react genommen für ein Ticketsystem und fand es aussreichend wenn die Woche an Daten in den Browser geladen wird und ich dort filterung und Berechnungen vom Frontend ausführen lasse. Mit sockets habe ich es dann auf allen clients snycronisiert . Bei meiner GamerDatenbank , wo sich mit jedem Eintrag eigentlich alles kompeltt ändern könnte funktioniert das nicht, da muss ich halt wirkllich alle Datensätze haben um zu entscheiden ob jemand dort nun z.b. in der Liste vorkommt . Da ist es einfacher ich lass das SQL machen.

VIEWS sind Querys die schon Ihre arbeit tun und quasi ein cache aufbauen . Um beim Gameing zu bleiben , ich mach pro Rangliste einen eigenen View und rufe nur den ab , dann ist schon mal vorgewurstelt was da überhaupt möglich ist . Wenn ein neuer Datensatz hinzukommt wird allerdings der View neu organsiert und das kann leider bei großen Datenmengen unangenehm dauern . Lösung war bei mir eine Warte schleife " Neue Datensätze werden berechnet , bitte warten ...." .

Also probiere es aus , lerne es einzuschätzen und dann optimieren . Programmieren besteht sowieso zu 90% aus optimierung , tut man das nicht hat man sowas wie Cyberpunk 2077 was trotz Kauf halt schwer bis schlecht funktioniert . (Aber das ist halt die Mode geworden ... die Kunden heut zu tage, kaufen es ja dennoch ... )

TheFamousSpy

22.12.2020, 10:30

Wenn du die Datenbank komplett abfragst, brauchst du ja wieder eine Datenbank um die Daten zu verwalten. Wenn du das alles in Arrays etc. speicherst wirst das alles brutal langsam.

Der beste Weg ist normalerweise die Datenbankabfrage zu optimieren, damit du nur die Daten bekommst, die du auch bearbeiten willst. Habe bei ähnlichen Projekten schon gesehen, dass einfach ein "select * from xy" verwendet wird und dann wird in der eigenen Anwendung angefangen die Daten zu sortieren etc. Dabei ist es einfacher und schneller wenn ich die Daten bereits entsprechend abfrage. Daher würde ich auch dir empfehlen, überlege welche Sachen bereits auf SQL-Query Ebene durchgeführt werden können, das bringt am meisten.

Alternativ bietet zum Beispiel Microsoft mit PowerBI eine entsprechende Lösung, die genau das bietet was du hier brauchst. Ist keine billige Lösung, aber die funktioniert ausgesprochen gut.

Woher ich das weiß:Berufserfahrung – drei Jahre Berufserfahrung mit Wordpress

medmonk

Von gutefrage auf Grund seines Wissens auf einem Fachgebiet ausgezeichneter Nutzer

Webentwicklung

22.12.2020, 10:42

Ich würde in deinem Fall vielleicht mal über Vue.js samt Nuxt Framework nachdenken. Darüber kann man schon ziemlich "nicen schice" anstellen und sowohl Client- als auch Serverseitig verdammt viel möglich ist.

Es bleibt dann ganz dir überlassen, welchen Daten direkt an den Client übergeben werden und/oder was auf deinem Server vor-gerendert wird. Die Lernkurve ist bei Vue auch um ein vielfaches schneller, als es bei Angular oder React der Fall ist.

Die Daten selbst könnte man in eine JSON schreiben, beliebig abfragen und nach eigenem Gusto im Frontend ausgeben. Alle mal schneller als mit PHP und sich die Einarbeitung in diese Frameworks meiner Meinung nach definitiv lohnt.

Woher ich das weiß:Berufserfahrung – UI/UX Designer, Full-Stack Developer

bensf

Fragesteller

22.12.2020, 11:13

Das hört sich doch ganz gut an. Hast du Empfehlungen wie ich mich dort am besten einarbeite? Kennst du gute Dokumentationen oder Videos?

medmonk

22.12.2020, 11:29

@bensf

Vue und Nuxt werden auf der jeweiligen Website einfach und gut dokumentiert erklärt. Auf YouTube findest du zusätzlich einige Kurse, die einen Schritt-für-Schritt durch die einzelnen Features führen. Wenn bereits JavaScript Wissen vorhanden ist, wirst du dich eigentlich relativ schnell zurechtfinden.

Neben Traversy Media kann ich dir auch die YouTube Kanäle von Academind, DesignCourse und FreeCodeCamp.org empfehlen, sofern du mit englischsprachigem Content keine Probleme hast.

Ähnliche Fragen

Daten aus MySQL auf Website darstellen?

Ich habe Daten in einer MySQL Datenbank, die ich gerne auf einer Website darstellen möchte, jeweils immer beim Klick auf einen Button (pro Button eine etwas andere Abfrage)

Eine entsprechende Abfrage dafür wird in JavaScript bereits erstellt.

Jetzt müssen die Daten nur noch abgerufen und eingefügt werden. - Nach allem, was ich gelesen habe, soll es sehr umständlich sein, MySQL in JavaScript zu verbinden.

Bisher habe ich probiert, die Abfrage per Cookie in PHP zu übertragen, dort die Daten abzufragen und zu echoen - das ganze mit einem getElementById().innervalue = ..., sodass immer die aktuelle Abfrage im DOM-Element ist, das passiert aber nur beim ersten Mal.

Das Abfragen der Daten in PHP und Zurückgeben an JS hat weder über einen Cookie, noch ein echo funktioniert.

...zur Frage

Prüfen ob eine SQL SELECT-Abfrage einen Inhalt zurückgibt?

Ich habe in PHP mit SQL einen Wert aus einer Datenbank abgefragt. Gibt es eine Möglichkeit zu überprüfen ob es einen Inhalt gibt. Also quasi wenn die Abfrage so lautet:

SELECT * FROM `TABELLE` WHERE `ID`=1234

Ausgelöst wird wenn es keine Zeile mit ID=1234 gibt?

Danke im Vorraus,

Bohne47

...zur Frage

PHP-Funktion auslösen bevor man die Seite verlässt?

Ich probiere grade aus, meine eigenen „Google Analystics“ zu machen, da das Originale zu teuer ist. Egal, kommen wir zurück zum Thema. Wie füge ich Daten zu einer MySQL-Datenbank hinzu, genau dann, wenn der User die Seite verlässt. Ich habe es bereits mit diesem JavaScript versucht:

How do i run PHP-Functions before the page unloads bwz. close? I tried `beforunload` but it never really worked. I want to insert a record for analystics into php database. Here is the JavaScript:


```
const beforeUnloadListener = (event) => {
   document.write(' <?php 
		$sql2 = "DELETE FROM `SwiftSpion` WHERE ip = `$ip`";
$result2 = $conn->query($sql2);
	?> ');
}

window.addEventListener("beforeunload", beforeUnloadListener);

	const pageHideListener = (event) => {
    document.write(' <?php 
		$sql2 = "DELETE FROM `SwiftSpion` WHERE ip = `$ip`";
$result2 = $conn->query($sql2);
	?> ');
}
document.onvisibilitychange = function() {
  if (document.visibilityState === 'hidden') {
		document.write(' <?php 
		$sql2 = "DELETE FROM `SwiftSpion` WHERE ip = `$ip`";
$result2 = $conn->query($sql2);
	?> ');
  }
};

window.addEventListener("pagehide", pageHideListener);
```



I expect, that the MySQL-Command works when the user leaves the site.

...zur Frage

PHP dynamische Tabelle?

Hallo zusammen,

ich würde gerne Daten aus einer Datenbank mit PHP auf einer Webseite anzeigen lassen. Wie man die Verbindung mit einer DB herstellt und wie man die mit SQL ausliest weiß ich. Jedoch möchte ich die Werte in einer Tabelle anzeigen, die sich ständig wie die Werte ändert. Was gibt es da für Möglichkeiten? Kann ich eine art if-Abfrage machen, mit der wenn neue Werte in die Datenbank kommen eine neue Zeile in der Tabelle erstellt wird (z.B. eine einfache HTML Tabelle die sich ständig erweitert)? Und wie kann man das mit PHP programmieren, dass die DB ständig automatisch neu ausgelesen wird?

Ich hab erst vor kurzem mit Webdevelopment angefangen, das ist mein erstes Projekt. Ich kenne mich mit den Sprachen noch nicht so richtig aus, deswegen weiß ich nicht wie man sowas realisiert.

Falls meine Vorgehensweise totaler Quatsch ist und ihr bessere Vorschläge habt oder ihr Tipps habt wie ich das Umsetzten kann wäre ich euch echt dankbar.

...zur Frage

SQL- Durchschnitt berechnen?

Sitze gerade an einem PHP Projekt und möchte in SQL den Durchschnitt mehrerer Werte in einer Spalte berechnen. Wie ginge dies? Schon mal Vielen Dank 😄

...zur Frage

PHP variable in Echtzeit anzeigen?

Hi. Ich hatte vor in einem PHP Projekt von mir eine Variable von einer Datenbank in Echtzeit anzeigen zu lassen. Gegebenenfalls kann man dafür auch JavaScript verwenden, allerdings soll eine PHP Variable in Echtzeit auf der Seite sein. Also sollte sich die Variable in der Datenbank ändern, so sollte auch ohne dass man die Seite aktualisiert der Aktuelle Wert der Variable erscheinen. Wie das ganze geht weiß ich aber leider nicht.

Ich hoffe jemand kann mir da bei meinem Problemchen helfen. Ich bin für jede Antwort dankbar. LG :)

...zur Frage

Korrekte SQL-Abfrage mit PHP-Variable?

Hi,

wie lautet die korrekte Syntax für eine SQL-Abfrage via PHP mit einer Variblen?

Sieht z.Zt. so aus... leider nimmt er $wert nicht an...

$sql = 'SELECT * FROM tabelle WHERE ID = $wert';

...muss $wert in '$wert' oder in "$wert" mit '.$wert.' oder ohne?

Schreibe ich meine SQL-Abfrage besser direkt in " " ?

...zur Frage

Javascript Ajax Php kein Wert?

Console:

HTML javascript Code ajax:

function send(text){
   console.log("Text kurz vor versenden:\n" +text);
//hier hat er noch einen wert
   $.ajax({
     method: "POST",
     url: "DataSender.php",
     data: { text: text}
   }).done(function( response ) {
       console.log(response);
     console.log("weiterleitung

Php Code Ajax Übertragung wo es nicht geht:

      $text = $_POST['text'];
      $sql = "INSERT INTO `Xss-Data` (`ID`,`DATA`, `created_at`) VALUES (null, '{$text}' , CURRENT_TIMESTAMP)";

      if (empty($text)) {
              //das ist empty!
              echo("Error:\nEs ist leer\nText wäre\n$text");
          } else

Sind die wichtigen Code snippets

Der String hat keinen Wert. Warum? Wie löst man das?

...zur Frage

Manage ich eine SQl-Datenbank lieber mit PHP oder mit JAVA?

Java kann ich schon ein wenig, php nicht, doch überall schwirrt dieses phpmyadmin rum.

Mein großes Projekt lautet: "Ich will eine Datenbank erstellen, in die ausgesuchte Menschen online über eine website Daten eintragen können".

Ich frage mich nun, wie ich das angehen soll und ob ich das mit phpMyAdmin mache (und dafür php lernen muss?) oder ob ich das irgendwie mit java basteln soll.

Ich bin dankbar für jede Hilfe.

...zur Frage

MySQL databse auf update prüfen?

Gibt es eine if abfrage in PHP mit der ich eine veränderung in einem SQL Table feststellen kann? Oder wird dafür jQuery ajax benötigt?

Danke für Antworten :)

...zur Frage

In PHP SQL aus Variable ausführen?

Ich habe in PHP eine Variable $inhalt erstellt und möchte den Inhalt der Variable gerne als SQL in einer Datenbank ausführen.

$dblink = new PDO('mysql:host=HOST;dbname=NAME', 'BENUTZERNAME', 'PASSWORT');
$inhalt = 'INSERT INTO `testTabelle`(`inhalt1`, `inhalt2`) VALUES(10, 1)';
$dblink->query($inhalt)

Allerdings passiert nichts.

Hoffe Auf Hilfe,
Bohne47

...zur Frage

Website mit MySQL Datenbank verbinden?

Ich habe mit XAMPP und phpmyadmin eine kleine SQL Datenbank angelegt. Man kommunziert da allerdings nur mit sich selbst. Wie verbinde ich also eine MySQL Datenbank mit einer Website, das ich z.B. mit einem PHP Skript Daten hinzufügen kann. Wichtig: Die Website sollte online sein und nicht nur für mich

...zur Frage

PHP MySQL-Abfrage mit zwei Werten?

Hallo zusammen. Ich habe vorlaufend ein Login-Skript, was mir auf der "internen" Seite dann den Nutzernamen mit

$user = check_user();

Hallo <?php echo htmlentities($user['vorname']);

ausgibt, was auch funktioniert.

Jetzt möchte ich allerdings mit dem Nutzernamen weiterarbeiten und habe eine Abfrage, welche aus einem anderen Tabellenblatt der SQL den Match mit dem Vornamen suchen und den folgenden Wert dann natürlich ausgeben soll.

Aber irgendwie bin ich auf dem Holzweg, weil das nicht hinhaut.

Ich würde mich total über eine Hilfestellung freuen.

Danke.

Warning: Array to string conversion in

  // Create connection
  $conn = new mysqli($servername, $username, $password, $dbname);
  
  // Check connection
  if ($conn->connect_error) {
    die("Connection failed: " . $conn->connect_error);
  }
  
  $sql = "SELECT versendet FROM obwacht WHERE ersteller like '$user'";
  $result = $conn->query($sql);
  
  if ($result->num_rows > 0) {
    // output data of each row
    while ($row = $result->fetch_assoc()) {
      echo "Versendet: " . $row["versendet"]. " - Name: " . $row["ersteller"]. "<br>";
    }
  }
  else {
    echo "0 results";
  }
  
  $conn->close();
?>

...zur Frage

PHP/MySql wie überprüfen ob Nutzername bereits vergeben?

Wie würde ich das hier am besten mit einer If-Abfrage überprüfen bevor es etwas in die SQL Datenbank schreibt ?

<?php
   $server = 'localhost';
   $user = 'root';
   $psw = null;
   $dbName = 'TestDatenbank';
try {
   $conn = new PDO('mysql:host='.$server.';dbname='.$dbName.';charset=utf8', $user, $psw);
   $conn->setAttribute(PDO::ATTR_ERRMODE, PDO::ERRMODE_EXCEPTION);
   $conn->setAttribute(PDO::ATTR_EMULATE_PREPARES, false);

// POST wird mit AJAX gesendet
   $username = htmlspecialchars(stripslashes((trim($_POST["username"])))) ;
   $password =  password_hash(htmlspecialchars(stripslashes((trim($_POST["password"])))) ,PASSWORD_DEFAULT) ;
   $cash =     100;

// Schreibt in die Datenbank

   $sql = "INSERT INTO user (username,password,cash) VALUES (:username,:password,:cash) ";
   $sqlvars = array("username"  => $username,
   "password" => $password,
   "cash" => $cash);
   $Abfrage = $conn->prepare($sql);
   $Abfrage->execute($sqlvars);


}catch (PDOException $e) {
  print "Error!: " . $e->getMessage() . "<br/>";
  exit;
}

...zur Frage

Was möchtest Du wissen?

Deine Frage stellen