老布這麼說

有時間就來看看 python OOP 的相關

Reference

• Object-Oriented Programming (OOP) in Python 3 – Real Python

• [Python教學]物件導向-Class類的封裝/繼承/多型 | Max行銷誌

• Start Here – Real Python 有空來讀讀，這 book

在針對不同的 telemetry-type 實作不同的 de-normalize & to_parquet 時，覺得這滿適合用 Factory Pattern 的，就花些時間來試試看囉
這樣做，覺得滿好的

Reference

• The Factory Method Pattern and Its Implementation in Python – Real Python 這篇很有用，我就是看這篇邊改邊實作的
• [Design Pattern] Factory Method 工廠方法 - iT 邦幫忙::一起幫忙解決難題，拯救 IT 人的一天 這篇較簡略，我反而不容易懂。不過，倒是看了這篇後，才覺得我也是可以用 Factory Pattern 的
• 什麼？又是／不只是 Design Patterns!? :: 第 11 屆 iThome 鐵人賽 找時間將這部分看一下，有個印象，才好深入

同場加映

• Python Tutorials – Real Python 有找到啥 keyword or 方式，想看看如何運用、實作可。嘗試，在這網站找找看

在找看看如何將 parquet file 寫到 S3 時，意外找到 aws-data-wrangler package，覺得還滿好用的

Reference

• awslabs/aws-data-wrangler: Pandas on AWS - Easy integration with Athena, Glue, Redshift, Timestream, QuickSight, Chime, CloudWatchLogs, DynamoDB, EMR, SecretManager, PostgreSQL, MySQL, SQLServer and S3 (Parquet, CSV, JSON and EXCEL).
• aws-data-wrangler/tutorials at main · awslabs/aws-data-wrangler 建議這份 tutorial 要整份看過一次
• amazon s3 - How to write parquet file from pandas dataframe in S3 in python - Stack Overflow

在 debug python 的時候，總想知道有沒有 call 到某個 function，目前是有用 decorator 來用
進階的方式為使用 dataclass，這還要找時間來試試囉

Reference

• Three ways to automatically add functions and methods calling log for Python code - DEV Community

最近在使用 class & decorators 時，都有看到 dataclasses 的說明，就來用用看囉
滿有趣的

Reference

• Python3.7 特色(1)-dataclasses
• 9 Reasons Why You Should Start Using Python Dataclasses | by Ahmed Besbes | Towards Data Science

記錄一下，目前使用 kms 的方式，主要是 ksm 要如何設定 policy 較為適合

Reference

• AWS KMS Customer Managed CMK with Terraform - The Cloudly Engineer

在 Mac 上，如何顯示 word 的標楷體，一直是個問題，目前找到解法囉

Reference

• 千呼萬喚始出來 研究生用 Mac 寫論文終於有標楷體啦！ | 滔客生活傳媒 - 3C滔客誌 | 3C Talk Online Magazine | 原侯壁
• OS X 标楷体 PostScript 名称修正 - 知乎

一開始是用 Docs overview | hashicorp/aws | Terraform Registry & aws-samples/aws-stepfunctions-ecs-fargate-process 範例來進行整合 step-function & ecs fargate 的流程

範例中，是直接用 aws resource & 自行定義 iam_role & policy 的方式，這方式可以清楚的了解 iam_role, policy 的運作，不過有點太苦囉
接著在 google 的過程中，有看到 Terraform AWS modules 的方式，在原來的基本上往上包了一層，提供更加方式使用 aws module 的方式
覺得滿好用的，接下來新增的部分，會先從 AWS module 來找找看，如何使用

Reference

• Terraform AWS modules | Terraform Registry 官方 aws module page
• Terraform AWS modules 官方的 gitHub page

記錄一下 python & 相關 ECS 的資料，可以來玩玩 side project

Reference

• How To Run Python APIs on AWS ECS | by Bhargav Bachina | Bachina Labs | Oct, 2021 | Medium
• Deploying a Containerized Flask Application with AWS ECS and Docker | A Cloud Guru

用 curl 送檔案到 api 的方式

方式

• 用 post request 的方式
  • curl -X PUT -d '{"id": 1}' https://reqbin.com/echo/post/json
• 用 post file 的方式
  • curl -d @path/to/data.json https://reqbin.com/echo/post/json

Reference

• How do I post a file using Curl?