전체 글 469

aws elasticsearch(es) with nifi

https://needjarvis.tistory.com/546 [엘라스틱서치] 데이터 입력과 Index, Type, Document 데이터입력 키바나(Kibana)의 콘솔을 활용하면 엘라스틱서치(Elasticsearch)에 매우 쉽게 데이터를 넣어볼 수 있다. 키바나(Kibana) Console 창에서 PUT Http 메소드를 사용하여 엘라스틱서치에 매우 쉽게 데 needjarvis.tistory.com https://syaku.tistory.com/378 Apache NiFi 로 데이터 흐름 제어하기 apache nifi, elasticsearch, kibana 모두 처음 다뤄보는 기술이라 잘 못된 설명이 있을 수 있습니다. Why 저희 팀은 모니터링 데이터를 수집하고 메신저로 전달하여 실시간으로 정보..

BigData 2021.06.27

Dask

https://devtimes.com/python-dask Python 병렬 처리를 위한 Dask - DevTimes 시계열 자료는 인덱스가 날짜 혹은 시간인 데이터를 말한다. Pandas에서 시계열 자료를 생성하려면 인덱스를 `DatetimeIndex` 자료형으로 만들어야 한다. devtimes.com https://publivate.tistory.com/245 [DataScience] pandas의 대안은? modin, dask, vaex 비교하기 데이터 사이언스를 시작할 때 주로 사용하는 언어는 R과 Python이 있습니다. 보통 개발을 시작하신 분들은 python으로 주로 입문하게 되죠. 이 때 주로 사용하는 라이브러리는 Pandas 라는 라이브러리 publivate.tistory.com ** D..

Python 2021.06.17

React Hooks

https://ko.reactjs.org/docs/hooks-overview.html Hook 개요 – React A JavaScript library for building user interfaces ko.reactjs.org https://velog.io/@velopert/react-hooks 리액트의 Hooks 완벽 정복하기 React Hooks 는 v16.8 에 도입된 개념으로서, 함수형 컴포넌트에서도 상태 관리를 할 수 있는 useState, 그리고 렌더링 직후 작업을 설정하는 useEffect 등의 기능을 제공합니다. 이에 대하여 한번 자세히 velog.io

Javascript 2021.06.14

인공지능 가격 예측

** 인공지능 가격 예측 유투브 https://www.youtube.com/watch?v=Teju_e9TI3s https://github.com/youtube-jocoding/pyupbit-autotrade youtube-jocoding/pyupbit-autotrade pyupbit 라이브러리를 활용하여 upbit에서 비트코인을 자동매매하는 코드입니다. 조코딩 유튜브 채널에서 자세한 강의 영상을 보실 수 있습니다. - youtube-jocoding/pyupbit-autotrade github.com import pyupbit . . data = df[['ds','y']] data . . from fbprophet import Prophet . . fig2 = model.plot_components(for..

BigData 2021.06.10