전체 글 469

Nifi 1.13.0

Apache NiFi 버전 1.13.0 중요한 기능, 개선 및 버그 수정 릴리스입니다. 출시 날짜 : 2021 년 2 월 15 일 1.13.0 릴리스의 주요 내용은 다음과 같습니다. 이제 시스템 수준 메트릭 (GC, 리포지토리 크기,로드 평균)에 대한 상태 기록이 유지됩니다. 이제 ListenFTP 프로세서를 지원하여 NiFi 자체가 FTP 서버로 작동 할 수 있습니다. 이제 수신 데이터 스키마의 진화에 따라 Hive 테이블 구조를 자동으로 변경할 수 있습니다. 구성 요소 수준 속성 (프로세서의 속성과 같은)은 이제 종속성 구조를 가지므로 사용자가 추가 관련 속성을 적절하게 설정하도록 안내합니다. 이제 Zookeeper 상호 작용을 TLS로 보호 할 수 있습니다. Microsoft Azure 프로토콜 및..

BigData 2021.02.22

Cypress E2E 테스트

ui.toast.com/fe-guide/ko_TEST 테스트 자바스크립트는 최근 몇 년간 비약적인 발전을 통해 사용 범위를 넓혀오고 있으며, 프론트엔드 환경에서 요구하는 애플리케이션의 수준도 나날이 복잡해지고 있다. 이와 더불어 자바스크립트 ui.toast.com medium.com/hbsmith/selenium%EC%97%90%EC%84%9C-cypress%EB%A1%9C-%EA%B0%88%EC%95%84%ED%83%84-%ED%9B%84%EA%B8%B0-324f224c14db Selenium에서 Cypress로 갈아탄 후기 Selenium과 Cypress의 차이점 medium.com class101.dev/ko/blog/2020/06/24/han/ Home 신나는 코딩세상 class101.dev

ETC. 2021.02.02

PyTorch

kyobobook.co.kr/product/detailViewKor.laf?mallGb=KOR&ejkGb=KOR&barcode=9791188621590&orderClick=JAj 파이토치 첫걸음 - 교보문고 고도의 기술을 배운다고 해서 그 시작도 어려워야만 할까요? 이 책은 미간 찌푸리지 않고 부담 없이! 마음 편히! 임할 수 있는 파이토치 입문용 최강 서적입니다. 학습을 위한 자세한 예제는 물 www.kyobobook.co.kr 89douner.tistory.com/m/96?category=878197 6-2. Docker에서 pytorch 환경 구축하기 with jupyter notebook 안녕하세요~ 이번에는 리눅스 환경에서 Docker를 이용하여 pytorch를 구축하려고해요! (윈도우 환경에서..

BigData 2021.01.27

AWS Terraform ( Terraformming Data Infra )

www.44bits.io/ko/post/terraform_introduction_infrastrucute_as_code#%EB%93%A4%EC%96%B4%EA%B0%80%EB%A9%B0-infrstructure-as-code-%EB%8F%84%EA%B5%AC-%ED%85%8C%EB%9D%BC%ED%8F%BCterraform 테라폼(Terraform) 기초 튜토리얼: AWS로 시작하는 Infrastructure as Code 테라폼(Terraform)은 인프라스트럭처를 선언적인 코드로 작성하고 관리할 수 있게 해주는 도구입니다. 이 글에서는 테라폼에 대해 소개하고, 이를 사용해 AWS 리소스를 정의하고 프로비저닝하는 방 www.44bits.io

AWS 2021.01.27

MWAA + Amazon EMR on EKS

aws.amazon.com/ko/blogs/korea/introducing-amazon-managed-workflows-for-apache-airflow-mwaa/ Amazon Managed Workflows for Apache Airflow(MWAA) 정식 출시 | Amazon Web Services 데이터 처리 파이프라인의 양과 복잡성이 증가함에 따라 전체 프로세스를 일련의 작은 태스크로 분해하여 간소화하고 워크플로의 일부로 이러한 태스크의 실행을 조정할 수 있습니다. 이를 위 aws.amazon.com aws.amazon.com/ko/blogs/korea/new-amazon-emr-on-amazon-elastic-kubernetes-service-eks/ 새로운 기능 — Amazon EMR on A..

AWS 2021.01.25

Kepler

medium.com/@thlee33/kepler-gl%EC%9D%84-%EC%9D%B4%EC%9A%A9%ED%95%9C-%EA%B1%B4%EB%AC%BC-3d-%EC%8B%9C%EA%B0%81%ED%99%94-330400887fe3 kepler.gl을 이용한 건물 3D 시각화 블로그를 올린 게 몇 개 안되는데 그 중에 그나마 반응이 있는게 건물 3D화였다. 그 게시물은 Cesium을 기반으로 하여서 GIS 분석가나 파이썬 기반 데이터 과학자에게는 조금 안맞을 수도 있을 것 medium.com brunch.co.kr/@sonjoosik/8 Uber의 데이터 시각화 도구 Kepler.gl Tech Review of Uber #5 | Uber에서는 복잡한 지역 정보와 교통 정보를 어떻게 시각화하고 있을까요? ..

BigData 2021.01.19