Airflow 오류 - Some workers seem to have died and gunicorn did not restart them as expected
ECS에 Airflow를 설정하던 도중 다음과 같은 오류 메시지를 만났습니다. Some workers seem to have died and gunicorn did not restart them as expected
Recent Posts
Spark 성능 최적화 및 튜닝 방법 - Part 1
최근에 Spark를 사용하면서 각종 High level API (Dataset, Dataframe) 와 어떻게 하면 Spark를 조금이라도 빠르게 쓸 수 있을지에 대한 고민을 하기 시작했는데요. Spark를 AWS EMR을 이용해서 돌리고 있고, EMR은 사용한 시간만큼 돈을 내는...
C32HG70 HDR 포함 최적 설정값
설정을 제대로 하지 못해 고통받고 있을 C32HG70 모니터 소유자분들을 위해 작성합니다. Windows 10, Nvidia 그래픽 카드 기준으로 HDR 켠 상태로 실사용 가능한 설정값입니다.
MySQL/MariaDB에서 유저에게 multiple host를 부여하는 방법
1. Subnet mask 이용하기 다음과 같이 설정하면 여러 대역대에 대해서 접근을 허용할 수 있습니다. 그러나 mysqluserclone 같은 오래된 유틸리티에서는 이러한 방식을 지원하지 않으니 주의하세요. e.g.) ‘username’@’10.12.0.0/255.255....
Jenkins slave node 구성하기 - Troubleshooting 포함
최근에 회사에서 Jenkins를 활발히 쓸 기회가 생겼습니다. 목적은 AWS에 배포된 EC2를 Slave node로 등록해서 배포를 자동화하려는 것이었는데요. 의외로 한 번에 설정하기가 쉽지 않더라고요. 예상치 못한 문제도 발생했고요.