- HOME >
- きい
きい
フリーランスのデータエンジニア
最近はTypescriptが楽しい
INTJ-A/5w4
Python, TS, GCP, AWS, SF, Tableau etc...
2025/3/22
Apache Airflowのオペレーターを使い分ける方法を解説。Pythonスクリプトの実行やSQLクエリ、クラウド連携、タスクの分岐など、実務でよく使われるオペレーターを紹介し、適切な選択方法を学べます。
2025/3/22
AirflowのDAG(Directed Acyclic Graph)は、データのワークフロー管理を効率化します。タスクの依存関係やスケジュールを管理する方法、最適な設計パターンについて解説します。
2025/3/22
AirflowはETL処理の自動化に優れたオープンソースツールで、複雑なデータワークフローを柔軟に管理できます。スケジュール実行、エラーハンドリング、クラウドとオンプレミス対応が可能で、ETLツールの中でも高い自由度と拡張性を誇ります
2025/3/22
Google Cloud Composerは、Apache Airflowのマネージドサービスで、データのワークフロー管理や自動化を簡単に行えるツールです。GCPのサービスと連携し、データパイプラインの効率化や機械学習の運用をサポートします。
2025/3/22
Apache Airflowは、データのワークフローを自動化するオープンソースツール。タスクのスケジューリングや依存関係の管理が簡単にでき、ETL処理や機械学習ワークフローを効率化します。Web UIで直感的に管理も可能。
2025/2/13
フルリモートのデータエンジニアは、自由な働き方、高収入、グローバルな案件に挑戦できる魅力的な職業です。しかし、自己管理能力やコミュニケーションスキルが求められます。データエンジニアとしてフルリモート勤務を目指す方法と必要なスキルを解説します。
2025/3/16
型安全(Type Safety)を導入することで、予測可能なコードを記述し、バグを早期に発見できるようになります。メンテナンス性やリファクタリングの容易さも向上し、コードの信頼性を高めるため、開発において重要な役割を果たします。
2025/3/17
データエンジニアとソフトウェアエンジニアの違いを徹底解説!それぞれの役割・求められるスキル・成果の軸・キャリアの違いを詳しく紹介します。どちらの職種を選ぶべきか迷っている方は必見です!
2025/3/16
Pythonのエラーの原因を効率的に特定するための方法を初心者向けに解説。print()での簡単なデバッグから、VS Codeのデバッグツール、モックを使ったテストコードまで、状況に応じて活用できる3つの方法を紹介します。
2025/3/16
JestのMock Functionsを使いこなして、効率的にテストを進める方法を解説します。jest.fn()、mockReturnValue、mockResolvedValueなど、便利なMock関数の使い方を具体的な例で紹介。テストで外部依存を排除し、柔軟なテストを実現する方法を学べます。