Einführung 

Introduction

Über eResources kann jeder AWIaner Speicherplatz beantragen um gemeinsam mit Kollegen an Projekten zu arbeiten. Zur Verfügung stehen:

  • Schnellen Online Speicher auf der Isilon (teuer)
    • in Bremerhaven oder Potsdam
    • als internen Speicher oder extern (in der "dmz").  Externer Speicher kann auf Antrag auf öffentlich erreichbaren Maschinen verfügbar gemacht werden. 
    • Optional mit einer automatischen Sicherheitskopie im Tape Archiv
  • Sicherer Tape Speicher im HSM System (günstig)
  • Paralleler Speicher für HPC/albedo (nur HPC intern erreichbar)
    • auf /albedo/work oder
    • auf /albedo/scratch (billiger) 

Hinweis: Für jedes Projekt können beliebig viele Speicher-Ressourcen beantragt werden. 

Via eResources every AWI user can request storage space to work on projects together with colleagues. The following are available

  •  Fast online storage on the Isilon (expensive)

    • in Bremerhaven or Potsdam
    • as internal storage or external (in the "dmz").  External storage can be made available on publicly accessible machines upon request. 
    • Optionally with an automatic backup copy in the tape archive
  • Secure tape storage in the HSM system (inexpensive)
  • Parallel storage for HPC/albedo (only HPC internally accessible)
    • on /albedo/work or
    • on/albedo/scratch (cheaper) 

Note: For each project, any number of storage resources can be requested. 

Projekt anlegen 

Vorüberlegungen

Create a project

Preliminary Considerations

Stellen Sie zunächst die folgenden Informationen zusammen:

  1. einen Namen für das Projekt,
  2. wer soll Besitzer/Eigentümer des Projekts werden,
  3. wie viel Speicherplatz (GB oder TB) wird ungefähr benötigt,
  4. wem Sie Zugriff auf Ihre Daten gewähren möchten (Lesen/Schreiben und Nur-Lesen). Dies können Einzelpersonen oder Organisationsgruppen wie "Klimadynamik/VL_CLIDYN_E" oder "Infrastruktur und Verwaltung/VL_IUV_E" sein.
    Hinweis: Für jede Nutzergruppe sollte ein eigenes Projekt beantragt werden.
  5. Optional:  Wer (nur Einzelpersonen) soll den Eigentümer als Administrator bei der Verwaltung des Projekts unterstützen
  6. die Kostenstelle (oder der Kostenträger) für das neue Projekt. Eine für diese Kostenstelle verantwortliche Person muss das Projekt genehmigen, sobald es beantragt wurde.
    Hinweis: Die Kostenstelle wird nicht belastet. Wir bitten ausdrücklich darum alle weiteren Anfragen diesbezüglich direkt an Controlling richten, da das RZ hierzu weder befugt noch befähigt ist, Auskünfte dazu zu erteilen.

Gather the following information:

  1. a name for your project,
  2. who will take primary ownership of a project,
  3. how much space (GB or TB) you need approximately,
  4. who you want to grant access to your data (read&write and read-only). This can be persons/individuals or organizational groups like "Klimadynamik/VL_CLIDYN_E" oder "Infrastruktur und Verwaltung/VL_IUV_E".
    Note: A separate project should be requested for each user group.
  5. optional: who (individual persons only) shall support the owner by administrating the project
  6. the cost center for your new project. A person responsible for this cost center will have to approve your project, once you have requested it.
    Note: Your cost center will not be charged. We kindly ask that you address all further inquiries in this regard directly to Controlling, as the data center is neither authorized nor qualified to provide information on this issue.

eResources nutzten 

Using eResources

  1. Der zukünftige Besitzer/Eigentümer muss sich hier https://cloud.awi.de/#/projects anmelden.

  2. Das Formular auf der linken Spalte (Project title, name, descriptions) sollte wie folgt ausgefüllt werden:
    1. Short description und Description ist weniger wichtig, jeder (halbwegs) sinnvolle Text reicht aus.
    2. Das Expire Date (Ablaufdatum) kann bis zu drei Jahren in der Zukunft liegen. (Bevor ein Projekt ausläuft wird eine Nachricht versendet, eine Verlängerung ist jederzeit möglich.)
    3. "Public Project" nicht anklicken
    4. Requested budget per year erstmal überspringen
    5. " (plus) Add a new resource" anklicken. Die meisten Voreinstellungen (Online Storage, Bremerhaven, Internal, Replica to Tape) dürften sinnvoll sein (weitere infos über das (info) neben den einzelnen Punkten), nur die Speichergröße wird benötigt:
    6. Jetzt das Requested budget per year ausfüllen.
  3. Rechte Spalte ausfüllen (Members)
    1. Einzelpersonen können Administratoren, Mitglieder (mit Schreib+Leserechten) oder Betrachter/Viewer (mir reinem Lesezugriff) werden
    2. Organisationseinheiten können nur Mitglieder oder Betrachter werden
  4. Auf Request this project klicken und warten
    1. Die/der Kostenstellenverantwortliche wird über eine E-Mail informiert und darum gebeten das Projekt zu genehmigen (im Zweifelsfall kann die Person natürlich auch gerne persönlich darum gebeten werden (wink))
    2. Sobald das Projketverzeichnis erstellt wurde, werden die Besitzer und Administratoren über eine E-Mail informiert.
  1. The intended owner has to login at https://cloud.awi.de/#/projects
  2. Fill out the form in the left column (Project title, name, descriptions)
    1. Short description and Description is less important, any string will do.
    2. The Expire Date can be up to three years in the future. (You will be notified in advance of the expiry.)
    3. Do not tick "Public Project"
    4. Skip Requested budget per year for now.
    5. Click on " (plus) Add a new resource". Most fields can be left untouched: Online Storage, Bremerhaven, Internal, Replica to Tape is fine (you can get more infos from the (info) next to the individual items ). Just enter the Storage Size you need.
    6. Fill out Requested budget per year 
  3. Fill out the right column (Members)
    1. Individual persons (can become administrators, members with read+write access, or viewers with read access only)
    2. Organizational units (can become members or viewers)
  4. Request this project and wait
    1. The persons responsible for the cost center will get an email and have to approve the project
    2. You will get an email once your project space has been installed

Zugriff auf Projektverzeichnisse 

Windows

Access Project Directories

Windows

  1. Der Eigentümer und/oder ein eventueller Admin/Mitglied muss sich erneut unter https://cloud.awi.de/#/projects anmelden und das Projekt auswählen.
  2. Am unteren Ende der Seite unter  „Directory paths“ auf „Windows“ klicken (dadurch wird der Link zu Ihrem Projekt in die Zwischenablage kopiert).
  3. Verbinden Sie sich mit Ihrem Projekt:
    1. Windows-Dateimanager öffnen
    2. Rechtsklick auf Netzwerk und Netzwerklaufwerk verbinden auswählen
    3. Fügen Sie den Inhalt der Zwischenablage mit STRG+V als zu-verbindenden Ordner ein
    4. Fertig stellen anklicken
  4. Jetzt können Sie auf Ihren Projektordner zugreifen (smile) .
  1. The owner and/or any admin/member has to login at https://cloud.awi.de/#/projects again and has to select your project.
  2. Move to the bottom of the page and click on Windows beneath Directory paths (this copies the link to your project  into the clipboard)
  3. Connect to your project:
    1. Open your Windows file manager
    2. Right click on Network and choose Connect network drive
    3. Paste the clipboard content with STRG+V into Folder/Ordner
    4. Click on Finish/Fertig stellen
  4. Now you can access your project folder (smile)

Linux

Die Filesysteme werden auf allen Linux Systemen (außer Laptops) automatisch gemounted (/hs, /isiphv, /isipd).

The file systems /hs, /isibhv and /isipd are shared and mounted automatically on most Linux clients (but not on laptops).

Zugriffsrechte 

access permissions

Bitte beachtet den gelben und roten Kasten oben auf dieser Seite Verwaltung von Berechtigungen / Change access permission

Please consider the yellow and red boxes on  top of page: Verwaltung von Berechtigungen / Change access permissions

Datenhaltungskonzept 

Problem

Data Policy

Problem

Oft verlassen Mitarbeiter/innen das AWI, ohne ihre Daten "zu übergeben". D.h. in den Projekt-Verzeichnissen gehören die Daten weiterhin dem/r ehemaligem/n Mitarbeiter/in und können von Kollegen/innen weder eingesehen noch aufgeräumt werden. Dieses Datenhaltungskonzept dient dazu, dass andere Projektmitglieder Zugang zu diesen  Daten bekommen.

Users often leave AWI without transferring their data to the remaining staff/supervisor, i.e., the project data  (or even the project itself) belongs to a former employee and can not be used. This policy aims to ensure that other members of the research group can access this data.

Konkret 

in Detail

  • Mitarbeiter/innen dürfen in Projektverzeichnissen keine privaten Daten speichern.
  • Alle Projektmitglieder haben lesenden und schreibenden Zugriff auf alle Daten des Projektes. (Die Abweichung von dieser Regel erfolgt auf eigene Verantwortung und ohne Unterstützung des RZs)
  • Projekt-Administratoren sind berechtigt die Zugriffsrechte ihres Projektes jederzeit auf die Standradwerte zurück zusetzten. 
  • Projekteigner (owner) sind dafür verantwortlich vor ihrem Ausscheiden aus dem AWI den Besitz des Projektes an jemand anderen zu übertragen.
  • Sollte dies versäumt werden ist das RZ berechtigt den (ehemaligen) Vorgesetzten ohne Rücksprache zum Projekteigner zu ernennen. 
  • Staff must not store private data in project directories.
  • All project members have read/write access to all project data. (Ignoring this recommendation is your own responsibility and is not supported by the IT department)
  • Project admins can reset the access permissions to the defaults at any time. 
  • Project owners are responsible to delegate the project's ownership  to someone else before they leave AWI.
  • If this is missed, the IT is entitled to appoint the (former) supervisor as the project owner without consultation.

Veraltet 

Deprecated



Projektordner können von jedem AWI-Nutzer beantragt werden und stellen die bevorzugte Speichermethode für alle Nutzenden dar. Ein Projekt kann unter der Weboberfläche

https://cloud.awi.de

beantragt werden (Home → Projects → Create). Der Besitzer und die Administratoren eines Projektes können anderen Personen (unabhängig von Abteilungen) Zugriff auf das Projekt gewähren (diese werden dann per Mail darüber informiert, müssen sich jedoch neu anmelden/einloggen).

Bei der Erstellung von Projekten, muss eine Kostenstelle und ein Ablaufdatum angegeben werden. Die Kostenstelle wird nicht belastet, sondern dient der Ressourcenplanung im Rechenzentrum. Rechtzeitig vor dem Erreichen des Ablaufdatums bekommen der Besitzer und die Administratoren eine E-Mail und haben die Möglichkeit das Projekt zu Verlängern. Wird das Projekt nicht verlängert wird der Zugriff auf die Daten zunächst gesperrt, bevor die Daten nach 90 Tagen (für zehn Jahre) in einen sicheren Bereich im Band-Archiv verschoben werden. (Ausnahme: Daten auf HPC Systemen werden unwiederbringlich gelöscht.)

Zur Auswahl stehen:

  • Schneller online Speicher (Isilon) in Bremerhaven und Potsdam (mit oder ohne Replikation auf Tape), 
  • und/oder langsamerer Tape-Speicher
  • und/oder schneller Speicher auf dem HPC System (albedo)

gewählt werden. Genauere Infos und finden Sie hier: https://spaces.awi.de/x/a13-Eg

Projektordner werden nicht automatisch eingebunden, wie bspw. der personal. Der Pfad für die manuelle Einbindung wird auf der jeweiligen Projektseite angegeben und lautet z.B. für online Speicher in Bremerhaven

\\smb.isibhv.dmawi.de\projects

bzw. unter Mac:

//smb.isibhv.dmawi.de/ projects

Wie genau die Einbindung funktioniert, ist von Betriebssystem zu Betriebssystem unterschiedlich. Mehr Infos diesbezüglich können hier gefunden werden: https://spaces.awi.de/x/Jx1aFQ

Auf Antrag kann das Projekt zur Anzeige in der Nextcloud freigeschaltet werden. Mehr Infos dazu finden Sie hier: https://spaces.awi.de/x/xoiwEw

Project folders can be requested by any AWI user and are the preferred storage method for all users. A project can be requested via the web interface

https://cloud.awi.de

Just navigate to “Home → Projects → Create”. The creator (and all admins) of the project can grant people project access, regardless of their department (they will then be informed of this by email and have to login again).

When creating projects, a cost center and an expiration date must be specified. The cost center is not charged, but is used for resource planning in the data center. Some time before the expiration date is reached, the owner and administrators receive an email and can extend the project. If the project is not extended, access to the data is initially blocked before the data is moved to a secure area in the tape archive after 90 days (for ten years).(Exception: Data on HPC systems will be deleted)

You can choose fast online storage (Isilon) in Bremerhaven and Potsdam (with or without replication to tape) as well as slower tape storage. You can find more detailed information and what is best for your application here: https://spaces.awi.de/x/a13-Eg

Project folders are not automatically added as a network drive on your computer, such as the personal. The path for manual integration of onlie space in Bremerhaven is, e.g.,

\\smb.isibhv.dmawi.de\projects

or on Mac:

//smb.isibhv.dmawi.de/projects


How exactly the integration works differs from operating system to operating system. More information in this regard can be found here: https://spaces.awi.de/x/Jx1aFQ

The project can also be activated for display in the Nextcloud. You can find more information here: https://spaces.awi.de/x/xoiwEw