К содержимому
learnspaceYOUR NEXT CHAPTER
ПРОСТРАНСТВО ОБУЧЕНИЯ
ГлавнаяКаталог курсовМоё обучениеCoursera

Знания без границ

Учитесь у лучших университетов и компаний мира.

Открыть Coursera
Интеграция
Пространство университета
Моё пространствоСтраница курса
↵
ЯЛичный кабинетСтудент
© 2026 LearnSpaceКаждый день — возможность узнать больше.Помощь
Serverless Data Processing with Dataflow: Pipelines - 日本語版 · LearnSpace
Назад в каталог
courseraПрограммирование

Serverless Data Processing with Dataflow: Pipelines - 日本語版

Курс от Google Cloud
Продвинутый≈ 13.9 чЯпонский
О курсеНавыкиПрограммаПреподаватели

О курсе

Dataflow コースシリーズの 2 回目である今回は、Beam SDK を使用したパイプラインの開発について詳しく説明します。まず、Apache Beam のコンセプトについて復習します。次に、ウィンドウ、ウォーターマーク、トリガーを使用したストリーミング データの処理について説明します。さらに、パイプラインのソースとシンクのオプション、構造化データを表現するためのスキーマ、State API と Timer API を使用してステートフル変換を行う方法について説明します。続いて、パイプラインのパフォーマンスを最大化するためのベスト プラクティスを再確認します。コースの終盤では、Beam でビジネス ロジックを表現するための SQL と DataFrame、および Beam ノートブックを使用してパイプラインを反復的に開発する方法を説明します。

Навыки, которые вы освоите

DataflowData PipelinesData ProcessingReal Time DataBusiness LogicProgram DevelopmentData TransformationDevelopment EnvironmentPerformance TuningGoogle Cloud PlatformPandas (Python Package)Data Import/Export

Программа курса

10 модулей · 59 учебных материалов

01はじめに 2 материалов

概要

コースの概要ВидеоCoursera: Google Cloud Platform と Qwiklabs を使用するВидео
02Beam のコンセプトの復習 7 материалов

Beam のコンセプトの復習

Beam の基礎Видеоユーティリティ変換Видео

Учитесь у экспертов

Google Cloud Training

Преподаватель курса

Serverless Data Processing with Dataflow: Pipelines - 日本語版
В каталоге вашей программы

Инвестируйте в себя

Новые знания — в удобное для вас время.

Начать на Coursera

Обучение откроется на Coursera
в новой вкладке

Обучение на Coursera

≈ 13.9 ч

10 модулей

Язык: Японский

Субтитры: Английский

Часть программы вашего университета
DoFn のライフサイクルВидео
ラボ: Apache Beam と Cloud Dataflow を使用して ETL パイプラインを作成する（Java）Внешний инструмент
ラボ: Apache Beam と Cloud Dataflow を使用して ETL パイプラインを作成する（Python）Внешний инструмент
理解度チェック 1 - Beam のコンセプトの復習Задание
モジュールのリソースЧтение
03ウィンドウ、ウォーターマーク、トリガー 9 материалов

ウィンドウ、ウォーターマーク、トリガー

ウィンドウВидеоウォーターマークВидеоトリガーВидеоラボ: Cloud Dataflow によるバッチ分析パイプライン（Java）Внешний инструментラボ: Cloud Dataflow によるバッチ分析パイプライン（Python）Внешний инструментラボ: Cloud Dataflow によるストリーミング分析パイプライン（Java）Внешний инструментラボ: Cloud Dataflow によるストリーミング分析パイプライン（Python）Внешний инструмент理解度チェック 2 - ウィンドウ、ウォーターマーク、トリガーЗаданиеモジュールのリソースЧтение
04ソースとシンク 10 материалов

ソースとシンク

ソースとシンクВидеоText IO と File IOВидеоBigQuery IOВидеоPubSub IOВидеоKafka IOВидеоBigTable IOВидеоAvro IOВидеоSplittable DoFnВидео理解度チェック 3 - ソースとシンクЗаданиеモジュールのリソースЧтение
05スキーマ 6 материалов

スキーマ

Beam スキーマВидеоコードの例Видеоラボ: 分岐するパイプラインとカスタム Dataflow Flex テンプレート（Java）Внешний инструментラボ: 分岐するパイプラインとカスタム Dataflow Flex テンプレート（Python）Внешний инструмент理解度チェック 4 - スキーマЗаданиеモジュールのリソースЧтение
06State と Timer 5 материалов

State と Timer

State APIВидеоTimer APIВидео概要Видео理解度チェック 5 - State と TimerЗаданиеモジュールのリソースЧтение
07ベスト プラクティス 11 материалов

ベスト プラクティス

スキーマВидео処理不可能なデータの処理Видеоエラー処理ВидеоAutoValue コード生成ツールВидеоJSON データ処理ВидеоDoFn ライフサイクルの活用Видеоパイプラインの最適化Видеоラボ: Cloud Dataflow による高度なストリーミング分析パイプライン（Java）Внешний инструментラボ: Cloud Dataflow による高度なストリーミング分析パイプライン（Python）Внешний инструмент理解度チェック 6 - ベスト プラクティスЗаданиеモジュールのリソースЧтение
08Dataflow SQL と DataFrame 5 материалов

Dataflow SQL と DataFrame

Dataflow と Beam SQLВидеоSQL でのウィンドウ処理ВидеоBeam DataFrameВидео理解度チェック 7 - Dataflow SQL と DataFrameЗаданиеモジュールのリソースЧтение
09Beam ノートブック 3 материалов

概要

Beam ノートブックВидео理解度チェック 8 - Beam ノートブックЗаданиеモジュールのリソースЧтение
10概要 1 материалов

概要

コースのまとめВидео