일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | |||||
3 | 4 | 5 | 6 | 7 | 8 | 9 |
10 | 11 | 12 | 13 | 14 | 15 | 16 |
17 | 18 | 19 | 20 | 21 | 22 | 23 |
24 | 25 | 26 | 27 | 28 | 29 | 30 |
- 카프카
- 오라클복구
- Kafka
- 결합연산자
- ORA-01034
- 하둡
- hadoop
- centos7
- hadoop명령어
- Linux
- 에러
- 하둡설치
- zookeeper
- tibero
- nomount
- 오라클
- sql처리순서
- ORA-27101
- 실습
- 설치
- crash recovery
- oracle
- window업데이트
- 하둡권한변경
- Standalone
- sql연산자
- 카프카 사용
- initorcl
- 완전분산환경
- recovery
- Today
- Total
목록IT 관련 (8)
IT 꿈나무의 일상
window 업데이트 후 계속 사용중이던 virtual box 접속시 다음과 같은 에러가 발생하였다. Stderr: VBoxManage.exe: error: Failed to open/create the internal network 'HostInterfaceNetworking-VirtualBox Host-Only Ethernet Adapter #3' (VERR_INTNET_FLT_IF_NOT_FOUND). VBoxManage.exe: error: Failed to attach the network LUN (VERR_INTNET_FLT_IF_NOT_FOUND) VBoxManage.exe: error: Details: code E_FAIL (0x80004005), component ConsoleWrap, ..
## 카프카 설정 시작 ## 9. 카프카 로그 폴더 생성 [kafka@localhost app]$ mkdir -p /home/kafka/app/logs/kafka1 [kafka@localhost app]$ mkdir -p /home/kafka/app/logs/kafka2 [kafka@localhost app]$ mkdir -p /home/kafka/app/logs/kafka3 10. $KAFKA_HOME/config 에서 3개의 server.properties 생성 >> 카프카 환경변수 이미 설정되어 있어야함 (export KAFKA_HOME=/home/kafka/app/kafka) [kafka@localhost ~]$ cd app/kafka/config/ [kafka@localhost config]$ ..
## 카프카를 설치하기 위해서는 Zookeeper를 설치해야 합니다. ## 해당 글은 서버 한대에 zookeeper와 kafka를 모두 실행합니다. 1. 카프카 유저생성 하기 [root@localhost home]# useradd kafka [root@localhost home]# passwd kafka [root@localhost home]# chmod -R 777 /home/kafka 2. 카프카 설치 # app과 data 디렉토리 생성 [kafka@localhost ~]$ mkdir app [kafka@localhost ~]$ mkdir data [kafka@localhost ~]$ ls app data # 카프카 2.12-2.8.0 버전 다운로드 [kafka@localhost ~]$ cd app..
# 하둡을 설치 하였으니 이번 글은 하둡명령어를 통해 하둡 사용을 해보겠습니다. 1. 파일 목록 조회 : hadoop fs -ls /user/ ls 명령어를 통해 하둡 디렉토리에 존재하는 파일을 확인 할 수 있습니다. [Hadoop@viera ~]$ hdfs dfs -ls / 21/07/02 18:28:31 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable Found 5 items drwxrwxr-x - Hadoop supergroup 0 2021-05-26 16:10 /viera drwxrwxr-x - root superg..
0. 하둡 환경변수 설정 vim .bash_profile 에 다음과 같은 환경변수 설정 export HADOOP_HOME=/usr/local/hadoop export HADOOP_MAPRED_HOME=$HADOOP_HOME export HADOOP_COMMON_HOME=$HADOOP_HOME export HADOOP_HDFS_HOME=$HADOOP_HOME export YARN_HOME=$HADOOP_HOME export HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native export HADOOP_OPTS="-Djava.library.path=$HADOOP_HOME/lib/native" export HADOOP_PID_DIR=${HADOOP_HOME}/pids ..
Hadoop 설치 (완전분산모드) 다음은 하둡 완전분산모드 설치하는 방법입니다. # 환경구성 - 하둡을 설치하기 전에 모든 서버는 JDK설치, hadoop실행계정 생성, ssh 인증같은 기본적인 환경설정이 완료되어 있어야합니다. ## 설치순서 0. 자바설치 (두개의 서버 계정에) 1. hadoop 계정 생성 2. 통신 라이브러리 설치 (ssh, rsync) 3. hadoop 바이너리 설치 4. 하둡설정변경 5. protocol buffer 설치 6. fully-distributed configuration 환경 구성 0. 자바설치 바이너리 받아서 서버에 각각 설치 1. hadoop 계정 생성 각 서버에 동일한 이름으로 hadoop 설치 할 계정을 생성한다. (계정 이름은 동일한 편이 다루기 쉽다.) [M..
# CentOs 7에서 Oracle 12c 설치 설치를 위해 기본적으로 자바가 설치되어 있어야 하는데, 먼저 기존에 존재하는 Open JDK를 삭제하고 자바를 설치하였다. 1. JAVA 설치 및 환경변수 설정 - 자바 설치 및 환경변수 설정은 검색하면 쉽게 찾을 수 있으므로 이 글에서는 다루지 않는다. 설치 후 명령어 입력하고, 다음과 같은 내용이 나오면 자바가 정상적으로 설치 되었다고 볼 수 있다. 자바 버전 확인은 다음과 같이 확인할 수 있다. [oracle@localhost ~]$ java -version java version "1.8.0_271" Java(TM) SE Runtime Environment (build 1.8.0_271-b09) Java HotSpot(TM) 64-Bit Server..
# Pixabay는 고화질의 이미지를 무료로 다운받아 사용할 수 있는 사이트 입니다. 원하는 키워드의 이미지나 동영상을 대량으로 다운받고 싶을때 Pixabay Developer API를 사용하여 간편하게 다운받을 수 있습니다. 1. 먼저 pixabay api를 이용할 수 있는 사이트에 들어갑니다. https://pixabay.com/ko/service/about/api/ Pixabay Developer API Pixabay Developer API Build something beautiful with the world's foremost collection of free high quality images and videos. Welcome to the Pixabay API, which gives yo..