Data & Analytics > DataFlow > リリースノート

2024. 01. 23.

機能改善/変更

  • 最初のフローを作成しないと有効性検査機能がオンにならないバグを修正しました。

2023. 12. 19.

機能追加

  • 新規ノード追加
    • Source
      • DB にクエリを実行してデータを取得する機能を追加しました。
    • Sink
      • parquetタイプでObject Storageにデータを保存する機能を追加しました。
      • parquetタイプでS3にデータを保存する機能を追加しました。

バグ修正

  • フローを作成しても有効性検査機能が正常に動作しないバグを修正しました。

2023.11. 28.

機能改善/変更

  • フロー保存、有効性検査時にエラーコードを追加しました。
  • 有効性検査機能を使用するかどうかを選択できるように変更しました。

2023. 10. 31.

機能改善/変更

  • DataFlow サービス環境を初期化する過程で発生するエラーメッセージを改善し、ユーザーに分かりやすくしました。

2023. 10. 17.

機能改善/変更

  • Log & Crash Search SourceノードにSecretKeyプロパティが追加されました。

2023. 09. 26.

機能改善/変更

  • データを処理する時にAt Least Onceをサポートできるように修正しました。
  • S3、OBS SinkノードのPrefix設定に時間形式用の新規オプションが追加されました。

バグ修正

  • Log & Crash Search Sourceノード終了中にエラーが発生すると、フローが終了しないバグを修正しました。
  • Cipher Filterノードを含むフローをコピーした後、すぐに実行するとフローが正常に動作しないバグを修正しました。
  • フロー終了中にエラーが発生した場合、再度終了をリクエストしても失敗するバグを修正しました。

2023. 07. 25.

バグ修正

  • フロー実行中に失敗して再実行する際、最後に実行したポイントから引き続き実行できるように修正しました。

2023. 06. 27.

機能追加

  • Log & Crash Search連動機能の追加
  • フローのログをLog & Crash Searchに保存できる機能を追加しました。

バグ修正

  • ログ表示ボタンの有効化タイミングを調整
  • ログ表示ボタンの有効化タイミングをPREPARING段階に修正しました。

2023. 03. 28.

機能追加

  • 新規ノード追加
    • Filter
      • Alter、Date、UUID、Split、Truncateなどさまざまなデータ処理方法を追加しました。
  • フロー使用量表示機能を追加
    • コンソールでフロー使用量をリアルタイムで確認できる機能を追加しました。

バグ修正

  • PREPARING段階に入る前にフロー使用量が先に上がるバグを修正しました。

2023. 02. 28.

機能追加

  • 新規ノード追加
    • Source
      • NHN Cloud ObjectStorageノードからデータを取得する機能を追加しました。
      • Amazon S3インタフェースを介してデータを取得する機能を追加しました。
      • Apache Kafkaを介してデータを取得する機能を追加しました。
    • Filter
      • grok、json、csvノードを追加してデータをさまざまに前処理する機能を追加しました。

2023. 01. 06.

バグ修正

  • フロー編集画面でノードを追加した後に最初のボタンクリックが動作しない問題を修正しました。
  • Cipherノードのフィールド追加を設定しても実際にはフィールドが追加されていない問題を修正しました。

2022. 12. 27.

新規サービスリリース

  • ETLフローの作成および実行ができるサービスです。
  • 下記のSourceをサポートします。
    • NHN Cloud Log & Crash Search
    • NHN Cloud CloudTrail
  • 下記のFilterをサポートします。
    • Cipher (NHN Cloud Secure Key Manager連動必要)
  • 下記のSinkをサポートします。
    • NHN Cloud Object Storage
    • Amazon S3 (Compatible)
    • Apache Kafka
TOP