Data Engineer
āļāļĩāđ21 Sun Passion Co., Ltd.Data Engineer
Bangkok, Bangkok, Thailand
āļŠāļĄāļąāļāļĢāļāļēāļ
āļŦāļĢāļ·āļāđāļāļ°āļāļģāļāļđāđāļāļ·āđāļ
āļāļģāđāļŦāļāđāļāļāļĩāđāđāļāļīāļāļĢāļąāļ
Data Engineer
āļĢāļēāļĒāļĨāļ°āđāļāļĩāļĒāļāļāļģāđāļŦāļāđāļ Data Engineer
- Data Pipeline & Architecture
- āļāļāļāđāļāļāđāļĨāļ°āļŠāļĢāđāļēāļāļāđāļāļŠāđāļāļāđāļāļĄāļđāļĨ (ETL/ELT Pipelines) āļāļąāđāļāđāļāļ Batch āđāļĨāļ° Real-time
- āđāļāļ·āđāļāļĄāļāđāļāļāđāļāļĄāļđāļĨāļāļēāļāđāļŦāļĨāđāļāļāđāļēāļ āđ āđāļāđāļ Database, REST APIs, āđāļĨāļ° Message Queues
- āļāļāļāđāļāļāđāļĨāļ°āļ§āļēāļāļĢāļēāļāļāļēāļāđāļāļĢāļāļŠāļĢāđāļēāļāļāđāļāļĄāļđāļĨ (Data Schema) āđāļāļ·āđāļāļĢāļāļāļĢāļąāļāļāļēāļĢāļāļģ Data Analytics āđāļāļīāļāļĨāļķāļ āļāļĢāđāļāļĄāļāļąāđāļāļ§āļēāļāđāļāļāđāļĨāļ°āļāļĢāļīāļŦāļēāļĢāļāļąāļāļāļēāļĢāļāļēāļĢāļāļąāļāļāļēāđāļāļĢāļ·āđāļāļāļĄāļ·āļāļ āļēāļĒāđāļ (Internal Tools)
- āļāļĢāļ§āļāļŠāļāļāđāļĨāļ°āđāļāđāđāļāļāļąāļāļŦāļē Query āļāļĩāđāļāļģāļāļēāļāļāđāļē (Slow Query)
- āļāļāļāđāļāļ Index āđāļĨāļ°āđāļāļĢāļāļŠāļĢāđāļēāļāļāđāļāļĄāļđāļĨāđāļāļ·āđāļāđāļāļīāđāļĄāļāļĢāļ°āļŠāļīāļāļāļīāļ āļēāļāļāļēāļĢāļāļķāļāļāđāļāļĄāļđāļĨ
- Data Quality & Monitoring
- āļāļĢāļ§āļāļŠāļāļāļāļ§āļēāļĄāļāļđāļāļāđāļāļ (Data Validation) āđāļĨāļ°āļāļ§āļēāļĄāļŠāļ°āļāļēāļāļāļāļāļāđāļāļĄāļđāļĨāļāđāļāļāļāļģāđāļāđāļēāļŠāļđāđāļĢāļ°āļāļ
- āļŠāļĢāđāļēāļāļĢāļ°āļāļ Monitoring āđāļĨāļ° Alerting āđāļĄāļ·āđāļāļĢāļ°āļāļ Pipeline āđāļāļīāļāļāđāļāļāļīāļāļāļĨāļēāļ āļĢāļ§āļĄāļāļķāļāļāļāļāļ§āļēāļĄāļāļīāļāļāļāļāļīāļāļāļ Data
- DataOps & Automation
- āđāļāđ GitLab CI/CD āđāļāļāļēāļĢāļāļģ Automated Testing āđāļĨāļ° Deploy āļĢāļ°āļāļ Pipeline
- āļāļąāļāļāļēāļĢ Containerization āļāđāļ§āļĒ Docker āđāļāļ·āđāļāđāļŦāđāļĢāļ°āļāļāļāļģāļāļēāļāđāļāđāđāļŠāļāļĩāļĒāļĢāđāļāļāļļāļ Environment
- Collaboration & Documentation
- āļāļģāļāļēāļāļĢāđāļ§āļĄāļāļąāļ Data Analyst āđāļĨāļ°āļāļĩāļĄ Developer āđāļāļ·āđāļāđāļāļĨāļĩāđāļĒāļāļāļ§āļēāļĄāļāđāļāļāļāļēāļĢāļāļēāļāļāļļāļĢāļāļīāļāđāļŦāđāđāļāđāļ Technical Solution
- āļāļąāļāļāļģāđāļāļāļŠāļēāļĢ Data Dictionary āđāļĨāļ° Data Lineage āđāļāļ·āđāļāļāļ§āļēāļĄāđāļāļĢāđāļāđāļŠāļāļāļāļāļĩāđāļĄāļēāļāđāļāļĄāļđāļĨ
āļāļąāļāļĐāļ°āļāļēāļāđāļāļāļāļīāļ (Technical Skills)
- Languages: Advanced SQL (Window Functions, CTEs), āđāļĨāļ° Python (Pandas, PySpark)
- Concepts: āđāļāđāļēāđāļāļŦāļĨāļąāļāļāļēāļĢ Data Warehouse, Data Lake, āđāļĨāļ° Big Data āļŠāļāļēāļāļąāļāļĒāļāļĢāļĢāļĄāļāđāļēāļ āđ
- Cloud: āļĄāļĩāļāļĢāļ°āļŠāļāļāļēāļĢāļāđāđāļāđāļāļēāļ Cloud Data Warehouse āđāļĨāļ° Cloud Storage (AWS, Azure, āļŦāļĢāļ·āļ GCP)
- Version Control: āđāļāđāļāļēāļ Git (GitLab, GitHub) āđāļāđāļāļĨāđāļāļāđāļāļĨāđāļ§ (Branching, Merge Request)
- Data Structures & Algorithms: āđāļāđāļēāđāļāļāļ·āđāļāļāļēāļāđāļāļĢāļ°āļāļąāļāļāļĩāđāļŠāļēāļĄāļēāļĢāļāļāļāļāđāļāļāđāļāđāļāļāļĩāđāļĄāļĩāļāļĢāļ°āļŠāļīāļāļāļīāļ āļēāļ
āļāļąāļāļĐāļ°āđāļāļīāđāļĄāđāļāļīāļĄ (āļāļ°āļāļīāļāļēāļĢāļāļēāđāļāđāļāļāļīāđāļĻāļĐ)
- Streaming: āļĄāļĩāļāļ§āļēāļĄāđāļāđāļēāđāļāļĢāļ°āļāļ Message Broker āđāļāđāļ Kafka āļŦāļĢāļ·āļ RabbitMQ
- Orchestration: āđāļāļĒāđāļāđāļāļēāļāđāļāļĢāļ·āđāļāļāļĄāļ·āļāļāļąāļāļāļēāļĢāļĨāļģāļāļąāļāļāļēāļ āđāļāđāļ Airflow āļŦāļĢāļ·āļ Prefect
- Tools: āļĄāļĩāļāļĢāļ°āļŠāļāļāļēāļĢāļāđāļāļēāļĢāđāļāđ dbt (Data Build Tool) āđāļāļāļēāļĢāļāļąāļāļāļēāļĢ SQL Models
āļāļļāļāļŠāļĄāļāļąāļāļīāļāļđāđāļŠāļĄāļąāļāļĢ (Qualifications)
- āļāļđāđāļāļ·āļāļŠāļąāļāļāļēāļāļīāđāļāļĒāđāļāđāļēāļāļąāđāļ
- āļ§āļļāļāļīāļāļēāļĢāļĻāļķāļāļĐāļēāļĢāļ°āļāļąāļāļāļĢāļīāļāļāļēāļāļĢāļĩāđāļāļŠāļēāļāļē Computer Engineering, IT āļŦāļĢāļ·āļāļŠāļēāļāļēāļāļĩāđāđāļāļĩāđāļĒāļ§āļāđāļāļ
- āļāļĢāļ°āļŠāļāļāļēāļĢāļāđ 1-3 āļāļĩ (āļŦāļēāļāđāļāđāļāđāļāđāļāļāļāđāļŦāļĄāđ āļāđāļāļāļĄāļĩ Portfolio āļŦāļĢāļ·āļāđāļāļĢāđāļāļāļāđāļāļĩāđāđāļāļĩāđāļĒāļ§āļāđāļāļāļāļĒāđāļēāļāļāļąāļāđāļāļ)
- āļĄāļĩāļāļąāļāļĐāļ°āļāļēāļĢāļāļīāļāđāļāļīāļāļāļĢāļĢāļāļ° (Logical Thinking) āđāļĨāļ°āļāļ§āļēāļĄāļŠāļēāļĄāļēāļĢāļāđāļāļāļēāļĢāļŠāļ·āđāļāļŠāļēāļĢāđāļĢāļ·āđāļāļāđāļāļāļāļīāļāđāļŦāđāļāļāļāļąāđāļ§āđāļāđāļāđāļēāđāļāđāļāđāļāđāļēāļĒ
- āļĄāļĩāļāļąāļāļĐāļ°āļāđāļēāļāļāļēāļĢāļŠāļ·āđāļāļŠāļēāļĢāđāļĨāļ°āļāļēāļĢāļāļĢāļ°āļŠāļēāļāļāļēāļāļāļĩāđāļĄāļĩāļāļĢāļ°āļŠāļīāļāļāļīāļ āļēāļ
- āļĄāļĩ Growth Mindset
āļŠāļĄāļąāļāļĢāļāļēāļ
āļŦāļĢāļ·āļāđāļāļ°āļāļģāļāļđāđāļāļ·āđāļ
āđāļāļĢāđ
Line
X (Formerly Twitter)
āļāļĢāļ°āļŠāļāļāļēāļĢāļāđāļāļĩāđāļāļģāđāļāđāļ
- āđāļĄāđāļĢāļ°āļāļļāļāļĢāļ°āļŠāļāļāļēāļĢāļāđāļāļąāđāļāļāđāļģ
āđāļāļīāļāđāļāļ·āļāļ
- āļŠāļēāļĄāļēāļĢāļāļāđāļāļĢāļāļāđāļāđ
āļŠāļēāļĒāļāļēāļ
- āđāļāļāļĩ / āđāļāļĩāļĒāļāđāļāļĢāđāļāļĢāļĄ
- āļ§āļīāļĻāļ§āļāļĢāļĢāļĄ
āļāļĢāļ°āđāļ āļāļāļēāļ
- āļāļēāļāļāļĢāļ°āļāļģ
