Big Data Engineering Prof. Dr. Jens Dittrich Grundvorlesung (6 CP), Sommersemester 2021

News

22.07.2021

Klausurhinweise

Liebe Studierende,

während des Probeuploads kamen noch einige Fragen auf, die wir hier im folgenden gerne noch mal für alle klären möchten.

Klausurbogen

Ihr bekommt von uns ein pdf-Dokument bestehend aus

Liebe Studierende,

während des Probeuploads kamen noch einige Fragen auf, die wir hier im folgenden gerne noch mal für alle klären möchten.

Klausurbogen

Ihr bekommt von uns ein pdf-Dokument bestehend aus

  • Deckblatt mit Hinweisen
  • Eigenständigkeitserklärung (diese findet ihr vorab auch schon hier)
  • Aufgabestellungen
  • leeren Seiten zum Lösen der Aufgaben

Solltet ihr viel Platz zum Schreiben brauchen, überlegt euch bitte vorher, wie ihr weitere Seiten an das pdf-Dokument anhängen könnt.

Klausurabgabe

Eure Abgabe muss ebenfalls ein einzelnes pdf-Dokument sein und sollte bestehen aus

  • mindestens Deckblatt (besser auch die Aufgabenstellungen)
  • ausgefüllter Eigenständigkeitserklärung
  • eure Lösungen (getippt, per Hand mit Tablet oder gescannt, wie es für euch am besten passt)

Achtet bei eurer Abgabe darauf, dass

  • die Klausur für eure Matrikelnummer ausgestellt ist
  • die Eigenständigkeitserklärung vollständig ausgefüllt ist
  • eure Lösungen gut lesbar sind (im Falle von Scans bedeutet das auch, dass die Auflösung ausreichend hoch ist)
  • eure Abgabe die maximale Dateigröße von 256MB nicht überschreitet

Entspricht eure Abgabe nicht diesen Vorgaben, insbesondere fehlt die Eigenständigkeitserklärung, wird die Abgabe nicht korrigiert.

Hilfsmittel und Quellenangaben

Da es sich um eine Open Book Klausur handelt, sind jegliche Hilfsmittel wie Taschenrechner und Internet gestattet. Euch ist lediglich untersagt, während der Klausur zu kommunizieren. Verwendet ihr zum Beantworten einer Frage etwas anderes als die Vorlesungsunterlagen (beispielsweise eine Internetseite im Fall einer offen gestellten Frage), dann müsst ihr die Quelle angeben. Hier gab es im Forum auch ein Thema dazu.

Solltet ihr vor der Klausur noch allgemeine Fragen haben, beantworten wir die gerne für alle im Forum.

Viel Erfolg bei der Klausur

Euer Tutor:innenteam

19.07.2021

Freundliche Erinnerung zur Klausuranmeldung

Liebe Studierende,

wir möchten euch hiermit daran erinnern, euch zur Klausur anzumelden. Nachträgliche Anmeldungen sind nicht möglich! Meldet euch bitte sowohl im CMS als auch gemäß eurer Prüfungsordnung (beispielsweise im HIS/POS) an.

Sollte eine Anmeldung... Weiterlesen

Liebe Studierende,

wir möchten euch hiermit daran erinnern, euch zur Klausur anzumelden. Nachträgliche Anmeldungen sind nicht möglich! Meldet euch bitte sowohl im CMS als auch gemäß eurer Prüfungsordnung (beispielsweise im HIS/POS) an.

Sollte eine Anmeldung über das HIS/POS nicht möglich sein, weil ihr die Vorlesung als Auflage für den Master hört, Informatik als Nebenfach belegt usw., so genügt eine Anmeldung im CMS. Wir stellen euch dann nach Bestehen einen Schein aus, den ihr einreichen könnt.

Euer Tutor:innenteam

13.07.2021

Ankündigung Klausur und Probeupload

Liebe Studierende,

das Semester neigt sich dem Ende zu und die Klausur rückt näher. Wie bereits zu Beginn der Vorlesung angekündigt, wird die Klausur online stattfinden. Um den Ablauf vorher einmal durchzugehen bieten wir einen Probeupload an. Nachfolgend... Weiterlesen

Liebe Studierende,

das Semester neigt sich dem Ende zu und die Klausur rückt näher. Wie bereits zu Beginn der Vorlesung angekündigt, wird die Klausur online stattfinden. Um den Ablauf vorher einmal durchzugehen bieten wir einen Probeupload an. Nachfolgend findet ihr alle wichtigen Informationen. Bitte lest diese sorgfältig.

 

Probeupload

Anmeldung: Die Anmeldung ist ab sofort über das CMS möglich, sobald ihr zur Klausur zugelassen seid. Da wir selbst auch die Technik im Hintergrund testen wollen, ist eine Anmledung zwingend notwendig, um teilnehmen zu können.

Datum: 20.07.2021 - 12:15 Uhr

Dauer: 45 Minuten

 

Klausur

Anmeldung: Die Anmeldung ist ab sofort über das CMS möglich, sobald ihr zur Klausur zugelassen seid. Denkt bitte auch daran euch entsprechend eurer Prüfungsordnung anzumelden (z.B. HIS/POS oder ViPa). Nur wer im CMS und entsprechend der Prüfungsordnung angemeldet ist, kann an der Klausur teilnehmen. Nachträgliche Anmeldungen sind nicht möglich!

Datum: 29.07.2021 - 10:00 Uhr

Dauer: 120 + 30 Minuten (Die Klausur ist auf 120 Minuten konzipiert, die zusätzlichen 30 Minuten geben wir euch zum Herunterladen, Drucken, Scannen, Hochladen, usw.)

 

Ablauf

Bis auf Datum und Dauer wird der Ablauf des Probeuploads und der Klausur identisch verlaufen.

  • Mit Beginn schalten wir die Seite zum Download unter exams.bigdata.uni-saarland.de frei (ebenfalls verlinkt unter Informationen).
  • Ladet eure Klausur herunter, indem ihr eure Matrikelnummer und das Captcha eingebt.
  • Bearbeitet die Klausur. Das könnt ihr entweder am PC, am Tablet oder nach Ausdrucken von Hand machen.
  • Ladet eure bearbeitete Klausur im pdf-Format wie eine Übung über das CMS innerhalb der Abgabefrist hoch.
  • Versichert euch, dass der Upload geklappt hat, indem ihr eure eigene Datei noch einmal herunterladet und überprüft.

Verspätete Abgaben oder Abgaben in einem anderen Format werden nicht akzeptiert! Kümmert euch rechtzeitig darum, für euch zu entscheiden, wie ihr die Klausur technisch umsetzt.

Während der Klausur sind wir im Sprachkanal Klausur über Discord erreichbar. Sollte es zu Klausurhinweisen oder -korrekturen kommen, werden wir diese über den Textkanal #klausur bekanntgeben.

 

Eigenständigkeitserklärung

Die Klausur wird als zweite Seite eine Eigenständigkeitserklärung enthalten. Diese müsst ihr zwingend digital oder manuell unterzeichnen. Überlegt euch bitte bereits im Vorfeld, wie ihr das am besten technisch umsetzt.

 

Viele Grüße und viel Erfolg bei der Vorbereitung

Euer Tutor:innenteam

08.07.2021

Übung 10

Liebe Studierende,

wir haben soeben Übung 10 hochgeladen. Die Lösungen zu Übung 9 stehen nun ebenfalls zum Download bereit.

Viel Erfolg

Euer Tutor:innenteam

06.07.2021

Graphdarstellungen im Jupyter Notebook

Liebe Studierende,

damit ihr die Graphdarstellungen der Daten im Jupyter Notebook Graphs in Cypher anzeigen könnt, muss vis.js, das als Submodul ans Repo angehängt ist, geladen werden. Führt dazu im Repo folgende Befehle aus, wodurch im Ordner third_party das... Weiterlesen

Liebe Studierende,

damit ihr die Graphdarstellungen der Daten im Jupyter Notebook Graphs in Cypher anzeigen könnt, muss vis.js, das als Submodul ans Repo angehängt ist, geladen werden. Führt dazu im Repo folgende Befehle aus, wodurch im Ordner third_party das entsprechende Repo geclonet wird.

$ git submodule init && git submodule update

Euer Tutor:innenteam

01.07.2021

Übung 9

Liebe Studierende,

wir haben soeben Übung 9 hochgeladen. Die Lösungen zu Übung 8 stehen nun ebenfalls zum Download bereit.

Viel Erfolg

Euer Tutor:innenteam

24.06.2021

Qualis Evaluation der Veranstaltung

Liebe Studierende,

auch dieses Semester soll unsere Veranstalung wieder evaluiert werden. Da wir versuchen unsere Veranstalungen fortlaufend zu verbessern, würden wir uns über euer Feedback freuen. Ihr könnt unter folgenden Links bis zum 15. Juli an der... Weiterlesen

Liebe Studierende,

auch dieses Semester soll unsere Veranstalung wieder evaluiert werden. Da wir versuchen unsere Veranstalungen fortlaufend zu verbessern, würden wir uns über euer Feedback freuen. Ihr könnt unter folgenden Links bis zum 15. Juli an der Evaluation teilnehmen. Ihr findet die Links auch oben unter Informationen. Bitte nehmt euch kurz die Zeit.

Vorlesung: https://qualis.uni-saarland.de/eva/?l=129668&p=n6ljst
Tutorium: https://qualis.uni-saarland.de/eva/?l=1296681&p=iljrhu
 

Viele Grüße

Euer Tutor:innenteam

24.06.2021

Übung 8

Liebe Studierende,

wir haben soeben Übung 8 hochgeladen. Diese Übung besteht nur aus drei Aufgaben. Die Lösungen zu Übung 7 stehen nun ebenfalls zum Download bereit.

Bitte beachtet, dass zum Ausführen des Notebooks Transactions.ipynb ein Update des... Weiterlesen

Liebe Studierende,

wir haben soeben Übung 8 hochgeladen. Diese Übung besteht nur aus drei Aufgaben. Die Lösungen zu Übung 7 stehen nun ebenfalls zum Download bereit.

Bitte beachtet, dass zum Ausführen des Notebooks Transactions.ipynb ein Update des PostgreSQL Connectors erforderlich ist. Dieses könnt ihr einfach Ausführen, indem ihr in der VM Folgendes ausführt:

$ pip install --upgrade psycopg2

Nun sollte Version 2.9.1 installiert werden.

Viel Erfolg

Euer Tutor:innenteam

Update: Selbstverständlich hat Übung 8 doch eine Programmieraufgabe. wink

17.06.2021

Übung 7

Liebe Studierende,

wir haben soeben Übung 7 hochgeladen. Diese Übung besteht nur aus drei Aufgaben, es gibt keine Programmieraufgabe. Die Lösungen zu Übung 6 stehen nun ebenfalls zum Download bereit.

Viel Erfolg

Euer Tutor:innenteam

10.06.2021

Übung 6

Liebe Studierende,

wir haben soeben Übung 6 hochgeladen. Die Lösungen zu Übung 5 stehen nun ebenfalls zum Download bereit.

Viel Erfolg

Euer Tutor:innenteam

04.06.2021

Zusammenlegung von Tutorien

Liebe Studierende,

da die Anzahl der Teilnehmenden an den Tutorien kontinuierlich abnimmt, haben wir uns dazu entschlossen Tutorien, die zur selben Zeit stattfinden, zusammenzulegen. Dadurch entfallen ab nächster Woche die Tutorien von Christopher, Lukas und... Weiterlesen

Liebe Studierende,

da die Anzahl der Teilnehmenden an den Tutorien kontinuierlich abnimmt, haben wir uns dazu entschlossen Tutorien, die zur selben Zeit stattfinden, zusammenzulegen. Dadurch entfallen ab nächster Woche die Tutorien von Christopher, Lukas und Simon. Solltet ihr zuvor an einem der Tutorien teilgenommen haben, könnt ihr dann einfach das zeitgleich stattfindende Tutorium besuchen.

Viele Grüße

Euer Tutor:innenteam

27.05.2021

Übung 5

Liebe Studierende,

wir haben soeben Übung 05 hochgeladen. Bitte beachtet, dass ihr dieses Mal zwei Wochen Zeit zur Bearbeitung habt, da nächste Woche keine Vorlesung stattfindet. Die Tutorien finden durchgängig statt.

Die Lösungen zu Übung 04 stehen nun... Weiterlesen

Liebe Studierende,

wir haben soeben Übung 05 hochgeladen. Bitte beachtet, dass ihr dieses Mal zwei Wochen Zeit zur Bearbeitung habt, da nächste Woche keine Vorlesung stattfindet. Die Tutorien finden durchgängig statt.

Die Lösungen zu Übung 04 stehen nun ebenfalls zum Download bereit.

Viel Erfolg

Euer Tutor:innenteam

20.05.2021

Übung 4 und Ausweichtutorium

Liebe Studierende,

wir haben soeben Übung 04 hochgeladen. Die Lösungen zu Übung 03 stehen nun ebenfalls zum Download bereit.

Aufgrund des Feiertages am kommend Montag bieten wir am Dienstag um 12:15 ein zusätzliches Tutorium an. Alle Studierenden aus den... Weiterlesen

Liebe Studierende,

wir haben soeben Übung 04 hochgeladen. Die Lösungen zu Übung 03 stehen nun ebenfalls zum Download bereit.

Aufgrund des Feiertages am kommend Montag bieten wir am Dienstag um 12:15 ein zusätzliches Tutorium an. Alle Studierenden aus den Montagstutorien können ein beliebiges Dienstagstutorium besuchen.

Viel Erfolg

Euer Tutor:innenteam

06.05.2021

Übung 3

Liebe Studierende,

wir haben soeben Übung 03 hochgeladen. Bitte beachtet, dass ihr dieses Mal zwei Wochen Zeit zur Bearbeitung habt, da nächste Woche keine Vorlesung stattfindet. Die Tutorien finden durchgängig statt.

Die Lösungen zu Übung 02 stehen nun... Weiterlesen

Liebe Studierende,

wir haben soeben Übung 03 hochgeladen. Bitte beachtet, dass ihr dieses Mal zwei Wochen Zeit zur Bearbeitung habt, da nächste Woche keine Vorlesung stattfindet. Die Tutorien finden durchgängig statt.

Die Lösungen zu Übung 02 stehen nun ebenfalls zum Download bereit.

Viel Erfolg

Euer Tutor:innenteam

29.04.2021

Übung 2

Liebe Studierende,

wir haben soeben Übung 2 hochgeladen. Hinweise zur Abgabe findet ihr am Ende des Dokuments. Die Übung umfasst dieses Mal drei Aufgaben statt vier. Die Lösungen zu Übung 01 stehen nun ebenfalls zum Download bereit.

Viel Erfolg

Euer... Weiterlesen

Liebe Studierende,

wir haben soeben Übung 2 hochgeladen. Hinweise zur Abgabe findet ihr am Ende des Dokuments. Die Übung umfasst dieses Mal drei Aufgaben statt vier. Die Lösungen zu Übung 01 stehen nun ebenfalls zum Download bereit.

Viel Erfolg

Euer Tutor:innenteam

24.04.2021

Übungsgruppen

Liebe Studierende,

wir haben euch jetzt in die Übungsgruppen eingeteilt. Eure Übungsgruppe findet ihr auf eurer persönlichen Statusseite, den Discord Raum der jeweiligen Übungsgruppe findet ihr auf der Teamseite. Die Übungsgruppen beginnen nächste Woche.

Wir... Weiterlesen

Liebe Studierende,

wir haben euch jetzt in die Übungsgruppen eingeteilt. Eure Übungsgruppe findet ihr auf eurer persönlichen Statusseite, den Discord Raum der jeweiligen Übungsgruppe findet ihr auf der Teamseite. Die Übungsgruppen beginnen nächste Woche.

Wir möchten die Übungsgruppen gerne interaktiv gestalten. Daher würden wir uns sehr freuen, wenn ihr eure Kamera einschaltet. Das ist vor allem für euch von Vorteil: Wir können direkt erkennen, ob wir die Inhalte verständlich vermitteln oder ob ihr euch langweilt. Außerdem wird der Kontakt so persönlicher und direkter.

Euer Tutor:innenteam

22.04.2021

Übung 1

Liebe Studierende,

wir haben soeben Übung 1 hochgeladen. Hinweise zur Abgabe findet ihr am Ende des Dokuments. Die Übung umfasst dieses Mal keine Programmieraufgabe.

Viel Erfolg

Euer Tutor:innenteam

Show all
 

Big Data Engineering

In diesem Kurs werden die Grundlagen von Datenmanagement aund Anfrageverarbeitung vermittelt.

Lernziele dieser Vorlesung sind:

  • Grundlegende Techniken im Bereich ”Big Data Engineering“ konzeptuell lernen.
  • Grundlegende Techniken im Bereich ”Big Data Engineering“ anwenden lernen.
  • Ihnen helfen, später nicht das Rad neu zu erfinden:
  • Lernen, neue Probleme auf existierende Probleme abzubilden und mit etablierten Techniken zu lösen.
  • Für Probleme wichtiger Anwendungen sensibilisieren: Privatheit, Deanonymisierung, ethische Fragestellungen
  • Für Lösungen wichtiger Anwendungen sensibilisieren: Aufwand, Performanz, Robustheit, Erweiterbarkeit, Wartbarkeit

Vorlesung

Die Vorlesung findet immer donnerstags um 10:15 statt und wird live über YouTube gestreamt. Zeitgleich können Fragen über unseren Discordserver gestellt werden. Die Vorlesung wird aufgezeichnet und kann zu einem später Zeitpunkt abgerufen werden. Den Link stellen wir über den Kalender und unter Materialien zeitnah zur Verfügung.

Übungsgruppen

Montags und dienstags finden Übungsgruppen statt. In den Übungsgruppen wird es sowohl Präsenzaufgaben als auch die Möglichkeit zum Stellen von Fragen geben. Bitte gebt bis zum 16.04.2021 23:59 auf eurer persönlichen Statusseite eure Terminpräferezen an. Anschließend werden wir euch auf die Gruppen verteilen. Solltet ihr an eurem eingeteilten Termin einmal verhindert sein, könnt ihr gerne auch eine andere Übungsgruppe besuchen. Die Übungsgruppen beginnen in der Woche vom 19.04.2021 und werden über unseren Discordserver abgehalten.

Office Hours

Zudem bieten wir über unseren Discordserver Office Hours an. Hier könnt ihr ebenso Fragen zur Vorlesungen und den Übungen stellen, aber euch auch bei technischen Problemen helfen lassen.

Übungen

Am Abend nach jeder Vorlesung veröffentlichen wir unter Materialien eine Übunng mit Aufgaben zur Vorlesung. Diese bestehen in der Regel aus drei schriftlichen Aufgaben und einer Programmieraufgabe. Übungen sind von euch in Gruppen von 2 bis 3 Studierenden zu bearbeiten und vor Beginn der nächsten Vorlesung über das CMS einzureichen. Anschließend werden eure Abgaben von unserem Team korrigiert und ihr erhalten über das CMS Punkt und Feedback.

Klausurzulassung

Um an der Klausur und/oder Nachklausur teilnehmen zu dürfen, müssen mindestens 50% der möglichen Punkte aus den Übungen erreicht werden. Zusätzlich dürfen maximal 2 Übungen mit 0 Punkten bewertet sein.

Klausur

Am Ende des Semesters findet sowohl eine Klausur als auch eine Nachklausur statt. Derzeit gehen wir davon aus, dass die Klausuren online stattfinden werden.

Note

Das bessere Ergebnis aus Klausur und Nachklausur bestimmt zu 100% die Gesamtnote. Um die Vorlesung zu bestehen, müssen mindestens 50% der Punkte in Klausur oder Nachklausur erreicht werden.

Plattformen

Nachfolgend noch mal eine Übersicht über die Platformen, die wir im Rahmen dieser Veranstaltung nutzen.

  • CMS: Ausgabe von Materialien, Abgaben von Übungen, Termine und Links.
  • Discord: Übungsgruppen, Office Hours, Fragen während Vorlesung (Anleitung zum Beitritt)
  • Forum: Fragen zu Vorlesung und Übungen, die für alle interessant sind, Gruppenfindung. Es dürfen keine Lösungen geteilt werden.

 



Datenschutz | Impressum
Bei technischen Problemen wenden Sie sich bitte an die Administratoren