BigQuery-Datenabfragen

BigQuery von Google Cloud speichert die strukturierten Daten eines Unternehmens in großem Umfang, von Nutzungsprotokollen bis hin zu Verkaufstabellen. Ein Beam-Agent führt eine vom Kunden bereits genehmigte Abfrage, wie z. B. die Auflistung von Konten, die einen bestimmten Schwellenwert überschreiten, nach einem Zeitplan oder bei Abruf durch ein anderes System aus und schreibt die übereinstimmenden Zeilen in das Ziel, das ein Team bereits verwendet, wie eine Tabellenkalkulation oder ein CRM. Er liest nur aus Tabellen, die die Berechtigungen des Kontos zulassen. Abfragen, die keine eindeutige Übereinstimmung liefern, an eine Berechtigungsgrenze stoßen oder eine völlig neue Abfrage erfordern, werden an einen Dateningenieur weitergeleitet, da das Abfragedesign eine menschliche Aufgabe bleibt.

Verarbeitung von Cloud Storage-Objekten

Cloud Storage speichert die Dateien, die ein Unternehmen in der Google Cloud aufbewahrt, von exportierten Berichten bis hin zu hochgeladenen Dokumenten. Ein Beam-Agent überwacht einen Bucket auf neue Objekte, die einem genehmigten Muster entsprechen, wie z. B. ein täglicher Export, der in einem Ordner landet, und verschiebt oder kopiert die Datei dorthin, wo ein nachgelagerter Prozess sie erwartet. Er prüft den Dateinamen und den Speicherort vor dem Ausführen anhand der Regel. Dateien, die im falschen Format ankommen, eine erwartete Größe überschreiten oder aus einer unbekannten Quelle stammen, verbleiben an Ort und Stelle, und jemand aus dem Cloud-Team erhält eine Benachrichtigung, um den Vorfall zu klären.

IAM-Zugriffsänderungen

Das IAM-System von Google Cloud steuert, wer auf welches Projekt und welche Ressource zugreifen kann. Ein Beam-Agent liest eine Zugriffsanfrage, z. B. von einem neuen Mitarbeiter, der eine bestimmte Rolle benötigt, gleicht sie mit den von einem Sicherheitsteam genehmigten Zugriffsrichtlinien ab und wendet die entsprechende Berechtigung an, wenn die Anfrage genau in ein bestehendes Muster passt. Er erweitert eine Berechtigung niemals über das hinaus, was die Richtlinie bereits zulässt. Anfragen für eine Rolle, die nicht auf der genehmigten Liste steht oder ein sensibles Projekt betrifft, werden an das Sicherheitsteam zur Genehmigung oder Ablehnung weitergeleitet, da Zugriffsentscheidungen außerhalb des Musters eine menschliche Entscheidung bleiben.