Seitenhistorie

• Mehrkernprozessoren und Multithreading sind heute weit verbreitet
• In diesem Zusammenhang sind synchronisierte Datenstrukturen (z.B. Hashmaps) wichtig, insbesondere eine effiziente Synchronisierung, sodass die Zugriffe bzgl. der Thread-Anzahl skalierbar sind
• In Java gibt es hierzu die Concurrent Collections
• Für C/C++ gibt es beispielsweise die TBB-Bibliothek (TBB = Threading Building Blocks), welche unter anderem hierzu Containers anbietet
• Ziel dieser Bachelorarbeit ist es die Datenstrukturen von Java und TBB experimentell mit eigenen Mikrobenchmarks zu evaluieruen und zu vergleichen

• Intel Threading Building Blocks, https://www.threadingbuildingblocks.org/docs/help/index.htm#tbb_userguide/title.html

• Code zu Infinileap: https://github.com/hhu-bsinfo/infinileap
• Infos EasyNVJ auf Anfrage

• In dieser Masterarbeit soll der Apache Plasma Speicher erweitert werden, sodass Daten per RDMA verteilt zugänglich gemacht werden
• Für RDMA soll Open UCX verwendet werden
• Für die Metadaten-Verwaltung soll ein verteilter Key-Value-Store verwendet werden, beispielsweise Redis oder Aerospike

KerA is a distributed message broker inspired by Apache Kafka developed by INRIA (Rennes) and University of Luxembourg. KerA focuses on load balancing, fault tolerance and fast networking using InfiniBand. Its implementation builds upon the RAMCloud system. KerA itself does not provide stream analytics but can be integrated with different stream processing system, e.g. Apache Flink. So far the integration is done using Apache Plasma allowing data exchange using shared memory between a KerA process and a Flink instance running on the same machine.

The main objective of this thesis is to replace the current log-structured memory implementation in KerA by RocksDB. The latter can already been used for storing state in Apache Flink which will allow direct data exchange between KerA and Flink through RocksDB avoiding copying data from and to shared space managed by Apache Plasma.

• Willingness to study source code of large systems

• Basic knowledge in C++ programming

• Working in an international cooperation

• OpenUCX bietet verschiedene Parameter für das Buffer-Management
• Im Rahmen dieser Arbeit soll UCX und insbesondere das Buffer-Management beschrieben werden
• Darauf aufbauend sollen Mikrobenchmarks geschrieben werden, um optimale Konfigurationen für verschiedene Workloads experimentell zu bestimmen

• OpenUCX, https://www.openucx.org/

• RUST bietet eine Reihe von Vorteilen für die Systementwicklung, insbesondere Typsicherheit
• Im Rahmen dieser Arbeit soll das hhuOS aus dem Modul "Betriebssystem-Entwicklung" in RUST umgeschrieben werden
• Weitere Infos auf Anfrage.

• 2019/10/13/introducing-arrow-flight/
• https://openucx.org

• https://www.

• OpenSHMEM ist eine Schnittstellendefinition für das PGAS-Modell (PGAS = Partioned Global Address Space) was im Prinzip ein Distributed Shared Memory (DSM) für verteilte und parallel Programme ist.
• Beim PGAS-Modell wird i.d.R. nicht die gesamte Speicher gemeinsam genutzt, sondern nur punktuell Variablen oder Datenstrukturen
• Da es sich um eine Schnittstellendefinition handelt gibt es verschiedene Implementierungen. In dieser Arbeit ist OSSS-UCX von Interesse, eine freie Implementierung von OpenSHMEM auf Basis von OpenUCX
  
• Open UCX ist ein Kommunikationsframework (geschrieben in C), welches transparent verschiedene Netzwerktechologien unterstützt u.a. auch InfiniBand
• Ziel dieser Bachelorarbeit ist es OSSS-UCX zu beschreiben, Mikro-Benchmarks zu schreiben und diese auf dem Cluster der Arbeitsgruppe mit InfiniBand-Hardware zu evaluieren

• cs.hhu.de/en/research-groups/opera?ng-systems/research/translate-to-english-hermes