반응형

2022/08 9

Zeppelin 0.10.1 버전 Docker로 사용하기

기존 포스팅에서 Zeppelin 0.8.1 버전을 사용하기 위한 방법을 소개했다. Zeppelin 설정하고 노트북 생성하기 ## 참고사항 ## 빅데이터나 하둡 관련 전문가가 아니기 때문에 일부 부족한 내용이 있을 수 있습니다. 셋팅과 기본적인 사용 외에, 하둡과 관련 생태계 운영의 트러블 슈팅은 잘 모릅니다. 오픈소 www.bearpooh.com HDP Sandbox를 이용한 방법과 Zeppelin Docker를 이용한 방법을 다뤘다. 그러나 0.10.1 버전의 경우 기존 방법으로 사용할 수 없어서 새롭게 정리한다. 오류 증상 Zeppelin Docker를 이용한 방법으로 0.8.1 버전 대신 0.10.1 버전을 사용하면 아래와 같은 오류가 발생한다. Zeppelin 0.8.1 버전을 Docker로 사용..

파이썬 라이브러리 의존성 확인하기

파이썬으로 프로그램을 작성하다보면 설치 된 패키지의 버전 충돌 여부를 확인해야 할 필요가 있다. 특히 파이썬의 경우 다양한 라이브러리를 설치해서 사용하기 때문에 라이브러리간의 의존성 확인이 중요하다. 이럴때 pipdeptree 라이브러리를 사용하면 쉽게 확인할 수 있다. 설치 된 라이브러리들의 버전 정보 뿐 아니라, 각 라이브러리와 연결 된 다른 라이브러리 정보 확인도 가능하다. 그리고 JSON이나 Tree 형태로 출력할 수 있어 정보 관리에도 편리하다. 공식 사이트는 다음과 같다. GitHub - naiquevin/pipdeptree: A command line utility to display dependency tree of the installed Python packages A command l..

::: IT인터넷 ::: 2022.08.25

pymongo를 이용한 MongoDB의 CRUD 클래스 구현

pymongo를 이용하여 MongoDB의 CRUD 클래스를 구현하는 방법에 대해 알아본다. pymongo로 MongoDB를 사용하는 방법에 대해서는 아래 포스팅을 참고한다. https://www.bearpooh.com/170 MongoDB의 mongosh에서 Database, Collection, Documnet를 사용하는 방법은 다음 포스팅을 참고한다. https://www.bearpooh.com/166 https://www.bearpooh.com/167 CRUD 클래스 구현 이전 포스팅에서 pymongo의 개요와 자주 사용하는 함수들에 대해 알아보았다. https://www.bearpooh.com/170 해당 함수들을 그대로 사용해도 되지만, Document 개수에 따라 호출하는 API가 다르기 때문..

::: IT인터넷 ::: 2022.08.22

Python으로 MongoDB 사용하기 (pymongo)

Python을 이용하여 MongoDB를 사용하는 방법에 대해 알아본다. MongoDB의 mongosh에서 Database, Collection, Documnet를 사용하는 방법은 다음 포스팅을 참고한다. https://www.bearpooh.com/166 https://www.bearpooh.com/167 Docker를 사용하여 MongoDB를 설정하는 방법은 다음 포스팅을 참고한다. Docker로 MongoDB 설정하기 MongoDB는 대표적인 NoSQL 데이터베이스 서비스이다. NoSQL은 기존 RDBMS의 단점을 극복하고, 보다 유연한 데이터 저장과 처리를 위해 제안되었다. 기존 RDBMS는 불가능한 스키마 (Schema)의 수평적 확장 www.bearpooh.com 그러나 매번 수작업으로 CRUD..

::: IT인터넷 ::: 2022.08.18

MongoDB 권한과 역할 관리 방법

MongoDB에서 권한과 역할을 생성하고 관리하는 방법에 대해 정리한다. MongoDB의 특징과 주요 개념은 아래 포스팅을 참고한다. https://www.bearpooh.com/163 MongoDB를 Docker로 설정하는 방법은 아래 포스팅을 참고한다. Docker로 MongoDB 설정하기 MongoDB는 대표적인 NoSQL 데이터베이스 서비스이다. NoSQL은 기존 RDBMS의 단점을 극복하고, 보다 유연한 데이터 저장과 처리를 위해 제안되었다. 기존 RDBMS는 불가능한 스키마 (Schema)의 수평적 확장 www.bearpooh.com 본 포스팅은 MongoDB 공식 문서와 아래 문서를 참고하여 작성했다. 정말 깔끔하게 정리가 잘 되어 있으므로 해당 포스팅을 읽어볼 것을 권한다. mongoDB ..

::: IT인터넷 ::: 2022.08.15

MongoDB 계정 관리 방법

MongoDB에서 계정을 생성하고 관리하는 방법에 대해 정리한다. MongoDB의 특징과 주요 개념은 아래 포스팅을 참고한다. https://www.bearpooh.com/163 MongoDB를 Docker로 설정하는 방법은 아래 포스팅을 참고한다. Docker로 MongoDB 설정하기 MongoDB는 대표적인 NoSQL 데이터베이스 서비스이다. NoSQL은 기존 RDBMS의 단점을 극복하고, 보다 유연한 데이터 저장과 처리를 위해 제안되었다. 기존 RDBMS는 불가능한 스키마 (Schema)의 수평적 확장 www.bearpooh.com 본 포스팅은 MongoDB 공식 문서와 아래 문서를 참고하여 작성했다. 정말 깔끔하게 정리가 잘 되어 있으므로 해당 포스팅을 읽어볼 것을 권한다. mongoDB 인증설정..

::: IT인터넷 ::: 2022.08.11

MongoDB의 Document 사용하기 (CRUD)

Docker를 이용하여 MongoDB를 설정했다면 실제 명령어를 사용해 볼 필요가 있다. Document의 생성, 읽기, 수정, 삭제에 대해 알아본다. MongoDB의 Database와 Collection을 사용하는 방법은 아래 포스팅을 참고한다. https://www.bearpooh.com/166 MongoDB의 Document 구조와 관계 패턴은 아래 포스팅을 참고한다. https://www.bearpooh.com/164 MongoDB의 구조와 특징은 아래 포스팅을 참고한다. https://www.bearpooh.com/163 준비 사항 DB 명령어는 MongoDB Docker 컨테이너 내부에서 mongosh를 실행해서 진행한다. Docker를 이용한 MongoDB 설정과 mongosh 실행 방법은 ..

::: IT인터넷 ::: 2022.08.08

MongoDB의 Database와 Collection 사용하기

Docker를 이용하여 MongoDB를 설정했다면 실제 명령어를 사용해 볼 필요가 있다. Database와 Collection을 사용하는 방법에 대해 알아본다. MongoDB의 Document 구조와 관계 패턴은 아래 포스팅을 참고한다. https://www.bearpooh.com/164 MongoDB의 구조와 특징은 아래 포스팅을 참고한다. https://www.bearpooh.com/163 준비 사항 DB 명령어는 MongoDB Docker 컨테이너 내부에서 mongosh를 실행해서 진행한다. Docker를 이용한 MongoDB 설정과 mongosh 실행 방법은 아래 포스팅을 참고한다. Docker로 MongoDB 설정하기 MongoDB는 대표적인 NoSQL 데이터베이스 서비스이다. NoSQL은 기존..

::: IT인터넷 ::: 2022.08.04

MongoDB의 데이터 모델링 패턴

MongoDB의 데이터 모델링 패턴에 대해 정리한다. MongoDB의 Document 구조와 관계 패턴은 아래 포스팅을 참고한다. https://www.bearpooh.com/164 MongoDB의 구조와 특징은 아래 포스팅을 참고한다. https://www.bearpooh.com/163 본 포스팅은 MongoDB 공식 문서와 아래 문서를 참고하여 작성했다. 정말 깔끔하게 정리가 잘 되어 있으므로 해당 포스팅을 읽어볼 것을 권한다. MongoDB 이해하기 사내에서 MongoDB를 잘 쓰기위한 스터디를 하게되어 이번 기회에 관련 자료를 정리하기로 했다. MongoDB가 왜 필요한지, 더 잘사용하기 위해서 무엇이 필요한지를 중심으로 처음 MongoDB를 사용할 때 kciter.so MongoDB의 공식 문서..

::: IT인터넷 ::: 2022.08.01
반응형