๋ฐฐ๋ฌ
๋ค์ต์คํธ๋ผ ์๊ณ ๋ฆฌ์ฆ ๊ธฐ์ด: ์ต๋จ ๊ฒฝ๋ก ๊ตฌํ๊ธฐ, ๊ฐ์ค์น
Posts by Category
- algorithm 32
- spark 8
- docker 6
- Airflow 5
- database 3
- googleDEcerti 3
- linux 2
- fastapi 2
- Airflow 1
- ["Airflow"] 1
- airflow 1
- mlops 1
algorithm
๊ฒฝ์ฃผ๋ก ๊ฑด์ค
๋ค์ต์คํธ๋ผ ์๊ณ ๋ฆฌ์ฆ ๊ธฐ์ด: ์ต๋จ ๊ฒฝ๋ก ๊ตฌํ๊ธฐ, ๊ฐ์ค์น
ํ๋ ฌ ํ ๋๋ฆฌ ํ์ ํ๊ธฐ
Programmers level 2
Jaden Case
Programmers level 2
์ผ๊ทผ์ง์
Programmers level 2
์ผ๊ฐ๋ฌํฝ์ด
Programmers level 2
๋ฑ๊ตฃ๊ธธ
Programmers level 2
๊ฑฐ์ณ๊ฐ ์ซ์์ ํฉ์ด ๊ฐ์ฅ ํฐ ๊ฒฝ์ฐ
Programmers level 2
n๊ฐ์ ์ต์๊ณต๋ฐฐ์
Programmers level 2
ํํ๋ณด๊ณ ์๋์ ์งํฉ ์ถ๋ก ํ๊ธฐ
Programmers level 2
2๊ฐ ์ดํ๋ก ๋ค๋ฅธ ๋นํธ
Programmers level 2
ransome note ๊ตฌ์ฑํ๊ธฐ
Grind 75 : Week 2
์ฒซ๋ฒ์งธ bad version ์ฐพ๊ธฐ
Grind 75 : Week 2
์ ๋ ฌ๋ ๋ฐฐ์ด์ ๋ํ merge
Grind75 : week 1
์คํ์ ์ฌ์ฉํด์ queue ์คํํ๊ธฐ
Grind75 : week 1
์ด์งํธ๋ฆฌ ๋ค์ง๊ธฐ
Grind75 : week 1
์ด์งํธ๋ฆฌ ๋ค์ง๊ธฐ
Grind75 : week 1
flood fill : graph
Grind75 : week 1
์ด์งํ์
Grind75 : week 1
Valid Anagram
Grind75 : week 1
Valid Palindrome
Grind75 : week 1
Best time to buy and sell stock
Grind75 : week 1
๋ฐฐ์ด
Array
keys and rooms
์ด์ด๋๋ฆผ ์ฝ๋ฉํ ์คํธ ํน๊ฐ 5์ฃผ์ฐจ
๋คํธ์ํฌ
์ด์ด๋๋ฆผ ์ฝ๋ฉํ ์คํธ ํน๊ฐ 3์ฃผ์ฐจ
ํผ๋ณด๋์น
์ด์ด๋๋ฆผ ์ฝ๋ฉํ ์คํธ ํน๊ฐ 3์ฃผ์ฐจ
์ฃผ์๊ฐ๊ฒฉ
์ด์ด๋๋ฆผ ์ฝ๋ฉํ ์คํธ ํน๊ฐ 3์ฃผ์ฐจ
์ฌ๋ฐ๋ฅธ ๊ดํธ
์ด์ด๋๋ฆผ ์ฝ๋ฉํ ์คํธ ํน๊ฐ 2์ฃผ์ฐจ
๊ดํธ ํ์ ํ๊ธฐ
์ด์ด๋๋ฆผ ์ฝ๋ฉํ ์คํธ ํน๊ฐ 2์ฃผ์ฐจ
two sum
์ด์ด๋๋ฆผ ์ฝ๋ฉํ ์คํธ ํน๊ฐ 1์ฃผ์ฐจ
์์ฃผํ์ง ๋ชปํ ์ ์
์ด์ด๋๋ฆผ ์ฝ๋ฉํ ์คํธ ํน๊ฐ 1์ฃผ์ฐจ
spark
Spark ํด๋ฌ์คํฐ ๊ตฌ์ถํ๊ธฐ3
๋ก์ปฌ์ ์ค์นํ๊ณ ํด๋ฌ์คํฐ ๊ตฌ์ฑํ๊ธฐ
Spark ํด๋ฌ์คํฐ ๊ตฌ์ถํ๊ธฐ2
๋ก์ปฌ์ ์ค์นํ๊ณ jupyter ๋ถ์ด๊ธฐ
Spark ํด๋ฌ์คํฐ ๊ตฌ์ถํ๊ธฐ
GCP๋ฅผ ํ์ฉํ์ฌ
Spark์ ํต์ฌ
RDD์ Lazy execution
์ค์๊ฐ ๋ฐ์ดํฐ ์ฒ๋ฆฌ์ Spark
์ค์๊ฐ ๋ฐ์ดํฐ ์ฒ๋ฆฌ ์ํคํ ์ฒ์์ spark๋ฅผ ์ฌ์ฉํ๋ ์ด์
Spark ์ ํ๋ฆฌ์ผ์ด์
์ ํ๋ฆฌ์ผ์ด์ ์ ๊ตฌ์กฐ์ ์คํํ๊ธฐ
spark cluster์ ๋ฆฌ์์ค ๋งค๋์
๋ฆฌ์์ค ๋งค๋์ ๋ฅผ ์ ํํ๋ ๋ฐฉ๋ฒ
spark cluster์ ๊ณ ๊ฐ์ฉ์ฑ ๊ตฌ์ฑ๋ฐฉ์
ํด๋ฌ์คํฐ์ ์ ๋ขฐ์ฑ๊ณผ ์์ ์ฑ ๋ณด์ฅํ๊ธฐ
docker
๋์ปคํ์ผ์ context
๋์ปค ๋น๋์ ์ปจํ ์คํธ์ ๊ฐ๋
๋์ปค ์คํ ๋ฆฌ์ง์ ๊ตฌ์กฐ์ ๊ด๋ฆฌ๋ฒ
Docker Storage
๋์ปค ๋คํธ์ํฌ์ ๊ตฌ์กฐ
Docker Network
Images and Container
์ด๋ฏธ์ง์ ์ปจํ ์ด๋์ ๊ฐ๋ ๊ณผ ์ฌ์ฉ๋ฒ
๋์ปค ์ํคํ ์ฒ
๋์ปค์ ํต์ฌ ๊ตฌ์ฑ ์์์ ๊ทธ ์ญํ
ํด๋ผ์ฐ๋ ๋ค์ดํฐ๋ธ์ ๋์ปค
๋์ปค ์ปจํ ์ด๋๋ฅผ ํ์ฉํ ์ ํ๋ฆฌ์ผ์ด์ ๊ฐ๋ฐ ๊ณผ์
Airflow
Airflow์์์ Xcom
์ด๋จ๋ xcom์ ์จ์ผํ ๊น?
Airflow ๋๊ทธ ๋ณ๋ ฌ๋ก ์ํํ๊ธฐ
๋ฐ์ดํฐ ํ์ดํ๋ผ์ธ ์ต์ ํ
Airflow ํด๋ฌ์คํฐ ๊ตฌ์ฑํ๊ธฐ
airflow cluster
Airflow์์ context์ args, kwargs์ ํ์ฉ
Context ํ์ฉ๋ฒ
Airflow ๋๊ทธ์์ ํ์ด์ฌ ํจ์์ ๋ฐ์ฝ๋ ์ดํฐ
๋ฐ์ฝ๋ ์ดํฐ ์ฌ์ฉํ๊ธฐ
database
HA ํจํด ์ค ํํธ๋นํธ ๊ธฐ๋ฐ ์๋ฃจ์ , pacemaker
Hearbeat solution in database HA
๋ฐ์ดํฐ๋ฒ ์ด์ค์ ๊ณ ๊ฐ์ฉ์ฑ ํจํด
HA patterns of Database
๋ฐ์ดํฐ๋ฒ ์ด์ค์ ์คํ ๋ฆฌ์ง
Database and Storage
googleDEcerti
๊ตฌ๊ธ ํด๋ผ์ฐ๋ ์๋น์ค์์ IAM
Google DE Certificate
DataFlow์ ํต์ฌ ๊ธฐ๋ฅ ๋ฐ ํ์ฉ
Google DE Certificate
Bigtable์ ๊ธฐ๋ฅ, ์ญํ ๋ฐ ์ต์ ํ
Google DE Certificate
linux
๋ฆฌ๋ ์ค ๊ธฐ์ด
linux class note : ์ปดํจํฐ ๊ณตํ ์ฌํ
๋ฆฌ๋ ์ค ์ด์์ฒด์ ์ ํน์ง
linux class note : ์ปดํจํฐ ๊ณตํ ์ฌํ
fastapi
FastAPI ๊ธฐ์ด: ASGI์ URL ์ดํดํ๊ธฐ
FastAPI์ ๊ธฐ๋ณธ ๊ฐ๋ ๊ณผ ASGI, URL ๊ตฌ์กฐ์ ๋ํด ์์๋ณธ๋ค
FastAPI ๊ธฐ์ด: ASGI์ URL ์ดํดํ๊ธฐ
FastAPI์ ๊ธฐ๋ณธ ๊ฐ๋ ๊ณผ ASGI, URL ๊ตฌ์กฐ์ ๋ํด ์์๋ณธ๋ค
Airflow
Airflow ๋๊ทธ์์ ํ์ด์ฌ ํจ์์ ๋ฐ์ฝ๋ ์ดํฐ
๋ฐ์ฝ๋ ์ดํฐ ์ฌ์ฉํ๊ธฐ
["Airflow"]
Airflow ๋๊ทธ์์ ํ์ด์ฌ ํจ์์ ๋ฐ์ฝ๋ ์ดํฐ
๋ฐ์ฝ๋ ์ดํฐ ์ฌ์ฉํ๊ธฐ
airflow
ํ์คํฌ์ SLA ์ฌ์ฉํ๊ธฐ
airflow ์ฑ๋ฅ ์ต์ ํ
mlops
MLOps Lv 2 ์ํคํ ์ฒ์์์ ํผ์ฒ์คํ ์ด
ํผ์ฒ์คํ ์ด์ ์ญํ ๊ณผ ์ด๋ฏธ์ง ๋ฐ์ดํฐ์ ๋ํ ํผ์ฒ์คํ ์ด ์ ํ