전체 글 469

KEDA

m.blog.naver.com/sundooedu/221719965372 쿠버네티스(Kubernetes) 컨테이너 확장 자동화 기술, KEDA(케다) 마이크로소프트가 공개한 KEDA 1.0은 이벤트 기반 컨테이너 오토 스케일링을 지원하는 쿠버네티스용 오... blog.naver.com keda.sh/ KEDA Application autoscaling made simple keda.sh docs.microsoft.com/ko-kr/azure/azure-functions/functions-kubernetes-keda Kubernetes의 Azure Functions 및 KEDA Kubernetes-based event-driven autoscaling(KEDA, Kubernetes 기반 이벤트 기반 자동 크..

BigData 2020.11.18

NIFI 퍼포먼스 분석 및 응용

m.blog.naver.com/PostView.nhn?blogId=oper13357799&logNo=220939422191&targetKeyword=&targetRecommendationCode=1 NiFi로 일몰 일출 배치 작업 수행하기 Intro 오늘은 하는 일이 많아 잡담대신 Intro에서 전체적인 내용에 대해 말씀드려야 겠습니다. 본 포스트... blog.naver.com 1. 각 프로세서의 Concurrent Tasks : 동시 작업 수. 권장 = 3 ~ 5. 아웃풋 프로세스는 30 ~ 50 이어도 괜찮음. - ReplaceText 같은 트랜스포메이션 프로세스들은 인/아웃풋 보다 상당한 스펙을 요구함. 10 이 적당. - 노드당 최대 쓰레드수라고 봐도 무방. 2. Controllers 설정의 '..

BigData 2020.11.17

AWS SQS to GCP Bigquery

https://github.com/kayac/bqin kayac/bqin Contribute to kayac/bqin development by creating an account on GitHub. github.com https://techblog.kayac.com/bqin-data-loading-tool-from-s3-to-big-query Amazon SQSを利用してAmazon S3からGoogle BigQueryにデータ投入するBQinというツールを書いた - KAYAC engine こんにちは。技術部の池田です。 この記事では、AWSを使っているプロジェクトではありがちなAmazon S3からGoogle BigQueryにデータを投入するためのツールを書いた話をします。 BQin - BigQuery data im tech..

GCP 2020.11.02

Windows (CRLF) / Mac OS (LF) 차이에 따른 설정

git config --global core.eol lf Windows - git config --global core.autocrlf true Linux, OSX - git config --global core.autocrlf input www.lesstif.com/gitbook/git-crlf-20776404.html git 에서 CRLF 개행 문자 차이로 인한 문제 해결하기 www.lesstif.com haru.kafra.kr/22 SourceTree를 통해 외부Git 저장소 관리시 CRLF 문제해결하기 필자가 작성하는 내용은 다음과 같은 내용을 기준으로 작성합니다. 1. Gitlab이나 Github와 같은 Git외부 Repository를 사용합니다. 2. 개발은 윈도우상에서 이루어집니다. 3. 개..

ETC. 2020.10.06