공부할게요

hive, tez 관련 설치프로그램 다운로드 hive: https://downloads.apache.org/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz tez: https://dlcdn.apache.org/tez/0.9.2/apache-tez-0.9.2-bin.tar.gz hive 기본 설치 # 압축해제 [wasadm@dw01 ~]$ cd ~/usr/local [wasadm@dw01 local]$ tar -zxf tmp/apache-hive-3.1.2-bin.tar.gz [wasadm@dw01 local]$ mv apache-hive-3.1.2-bin hive-3.1.2 [wasadm@dw01 local]$ cd hive-3.1.2 # 환경변수 추가 [wasadm@dw..

hive를 설치 하기에 앞서 metadata store로 사용할 mariadb를 먼저 설치합니다. mariaDB server 파일을 다운로드 해주세요. https://mariadb.org/download/?t=mariadb&p=mariadb&r=10.6.5&os=windows&cpu=x86_64&pkg=msi&m=yongbok 설치 [wasadm@dw01 ~]$ cd ~/usr/local/ [wasadm@dw01 local]$ tar -zxf tmp/mariadb-10.6.5-linux-systemd-x86_64.tar.gz [wasadm@dw01 local]$ sudo mv mariadb-10.6.5-linux-systemd-x86_64 /usr/local/mysql [wasadm@dw01 local]..

* 다음과 같이 3대의 서버를 이용해 구성예정 dw01 dw02 dw03 NameNode SecondaryNameNode NodeManager DataNode DataNode ResourceManager JobHistoryServer sudo 권한 얻기 [wasadm@localhost ~]$ su - root # 루트계정으로 변경 [root@localhost ~]$ hostname dw01 # 호스트네임 등록 [root@localhost ~]$ chmod +w /etc/sudoers # 파일에 쓰기 권한 부여 # vi는 파일 편집기로 /etc/hosts라는 파일을 열어서 편집하겠다는 의미로 # 입력은 i버튼 클릭 후 가능하고 # 작성후 ESC 버튼 누른 후 :wq 입력 enter를 치면 저장하고 다시 명..

1. vmware, centOS 관련 파일 다운로드 vmware: https://www.vmware.com/go/getplayer-win centOS: http://mirror.anigil.com/CentOS/7.9.2009/isos/x86_64/CentOS-7-x86_64-DVD-2009.iso 2. vmware 설치 후 centOS 설치 File > New Virtual Machine... 선택 Installer disc image file (iso): 에서 다운받은 centOS 이미지를 선택 계정과 패스워드를 설정하세요. Next 사용 용도에 따라 사이즈와 파일 형태를 설정해주세요. Customize Hardware 버튼을 클릭하여 용도에 맞춰 메모리/Cpu 코어수 등을 조절해 줍니다. Finish..

EC2란? Elastic Compute Cloud 를 줄인 말임 Elastic이란건 유연하다는 뜻임 쉽게 말해서 AWS에 돈을 내면 컴퓨터를 임대해주는 것인데, 구입할때는 돈이 안들고 내가 임대한 걸 쓰면 쓰는만큼 돈이 나감. 장점은 구입하면 1분 안에 생성도 되고 삭제는 더 빠름. Linux나 Window와 같은 운영체제를 제공. EC2랑 친해지기 키페어 생성 -> 키페어란? 인스턴스에 연결할 때 자격 증명을 입증하는 데 사용하는 보안 자격 증명 VPC(Virtual Private Cloud) 설정 -> VPC란? 사용자의 AWS 계정 전용 가상 네트워크, EC2 인스턴스, RDS 인스턴스 같은 리소스들은 전부 VPC 내에 등록하게 되며, VPC에 ACL 적용, Security Group 적용 등 여러..

AWS란? 클라우드 상에서 서버 구매/구축/운영 업무를 대행해주는 서비스임. 쉽게 말해서 컴퓨터를 임대해주는데 컴퓨터(EC2) 뿐만 아니라 데이터베이스(RDS)/하둡(EMR)/파일서버(S3) 등 관련된 인프라를 모두 구성할 수 있도록 여러가지 서비스를 제공하고 있음. auto scailng을 통해 탄력적으로 인프라 운영이 가능함. 사용한 만큼만 비용을 지불하면 되기 때문에 합리적임. 온-프레미스란? 기업이 자체적으로 보유한 물리적 서버에 직접 설치해서 운영. 클라우드 컴퓨팅 기술이 나오기 전 일반적인 기업의 인프라 구축 방법. 자체 보유한 서버에서 모든것이 이뤄지기 때문에 보안성이 높음. 신규로 시스템을 구축하거나 기존 시스템을 증설하는데 시간과 비용이 많이 듬.

스토리보드를 쉽고 빠르게 만들 수 있게 도와주는 파워포인트 Add-in 소프트웨어인 Power Mockup을 사용해보자! [ 다운로드 ]http://www.powermockup.com 에 들어가서 다운로드를 받는다.30일간 Free trial을 제공해주므로 기본기능들만 사용도 가능하다! 설치를 완료하면 파워포인트가 열리는데사용법에 대해 친절히 알려준다. 진한 색으로 표시된 부분은 기본기능으로 제공해주는 것이고화면에 Drag & Drop 으로 편리하게 사용하면 된다. 모든 기능을 다 사용하고 싶다면1. 유료 라이센스를 구입 2. 무료 라이센스 얻기! 요부분이 내가 하고자 하는 부분으로, 블로거를 사용하는 사람이라면 추천 포스팅을 작성 후 메일을 보내면 검토 후 무료 라이센스를 보내준다고 한다! [ 무료 라..

고스트 부팅 USB & 고스트 파일 만들기 3탄 만들어진 고스트 파일로 윈도우를 설치해봐여~! 고스트 부팅 USB로 부팅을 해주세요.(모르시면 2탄꺼 봐주세요.) 2탄에서 봤던 창이죠?To Image는 고스트 파일 만들때 쓰는거고우리는 From Image를 눌러주세요 고스트 파일을 D 드라이브에 저장해놨으니D드라이브를 선택해주세요.그럼 아까 만들어둔 .gho 파일이 있을꺼예요.선택하고 open 해주세요. OK를 눌러주세요. 얘도 OK를 눌러주세요. 우린 C드라이브에 윈도우를 깔거니깐첫번째꺼를 선택해주세요. 복구할꺼냐고 묻네요.네 해주세요. 성공적으로 끝났네요~ㅎReset Computer를 눌러주세요. 다시 C:\> 라고 뜰텐데USB를 빼주시고 Ctrl + Alt + Delete를 눌러주세요. 짜짠 윈도우..

고스트 부팅 USB & 고스트 파일 만들기 2탄 부팅 USB를 만들었으니고스트 이미지 파일을 만들어 볼게요. BIOS 모드에서 부팅순서 USB를 1순위로 변경하고 부팅을 하면 C:\> 라고 뜹니다.ghost라고 쓰고 엔터를 쳐주세요. OK를 눌러주세요. Local < Partition < To Image 를 눌러주세요. OK를 눌러주세요 우린 C드라이브를 백업할꺼니깐 첫번째를 클릭하고 OK를 눌러주세요. 이미지는 D드라이브에 저장하는게 좋겠죠? C드라이브는 윈도우 다시깔면 사라지니깐요~!D드라이브를 선택하고 이름은 원하시는 걸로 작성하고 Save 눌러주세요. 오+_+ 백업을 시작합니다.압축은 어떻게 할꺼냐고 묻네요.3개 다 해본결과 만들어지는 속도는 똑같네요. 이미지 파일의 크기는 큰 순서대로 써보면 이..

고스트 부팅 USB & 고스트 파일 만들기 1탄고스트 파일이란? 운영체제 복구 파일이라고 생각하면 된다.고스트 파일을 만들기에 앞서서 고스트 부팅 USB부터 만들어보자.Why? 고스트로 부팅해야 고스트 이미지를 만들 수 있으니깐~ㅋ 1. USB2. 고스트 부팅 USB 만드는 프로그램 자 위의 프로그램을 다운 받아서 압축을 푸세요. 압축을 풀었다면 USB를 꼽으세요.usb_format.exe를 관리자 권한(Windows 7 이상은 무조건)으로 실행 해주세요. 파일 시스템 유형 : FAT32(DOS로 부팅하려면 필수! NTFS는 안돼!!!)볼륨 이름 : 원하시는 이름포맷 옵션 : 빠른 포맷, DOS 시동 디스크 만들기 체크캡쳐본 대로 해주시고 DOS 시스템 파일 위치 지정 아래에 ...박스를 눌..