본문 바로가기

Work

[MariaDB] 포트변경
2021. 1. 28. 보안상 기본포트를 변경을 하려고 합니다. Selinux의 보안 정책상 특정 port 이외에는 변경을 막고 있는데요, 확인작업은 아래 명령어을 실행합니다. semanage port -l | grep mysqld_port_t 위 항목의 port이외에는 Selinux 가 포트변경을 막게 됩니다. 위 포트 이외에 다른 포트를 지정하기를 원하면 아래의 명령어를 실행합니다. 저는 3456 포트를 지정하였습니다. 포트를 확인하는 명령어를 다시 실행하여 정상적으로 지정되었음을 확인할 수 있습니다. semanage port -a -t mysqld_port_t -p tcp 3456 이제 MariaDB 에서 port를 변경하기 위하여 /etc/my.cnf.d/server.cnf파일을 에디터로 오픈하고, [mysqld] 항목..
[MariaDB] 데이터 경로 Datadir 변경 하기
2021. 1. 27. MaraiDB 데이터 폴더의 경로를 확인합니다. select @@datadir; MaraiDB 데이터 폴더를 변경하기 위하여 서비스를 중지합니다. $ systemctl stop mariadb 이동할 폴더를 생성하고, 다음과 같이 "rsync" 명령어를 이용하여 모든 데이터 파일을 복사합니다. rsync 없는경우 yum -y install rsync 설치 필수입니다. $ rsync -av /var/lib/mysql 이동할 경로 /etc/my.cnf.d 밑에 "server.cnf" 파일에서 "datadir"에 변경된 데이터 폴더를 아래와 같이 설정합니다. $ vim /etc/my.cnf.d/server.cnf [mariadb] datadir=신규경로 기본적으로 CentOS의 MaraiDB는 "/home", ..
[Server] Centos7 - MariaDB 10.4.17 설치 (yum 사용)
2021. 1. 27. DB설치전에 검토사항들이 많이있다. 어떤 버전으로 설치할것인지 내가 사용하는 리눅스 버전에 맞게, 설치하려는 버전에 맞게 Repo를 설정하고 설치해야한다. 필자의 서버는 Centos 7.8이며, MariaDB v.10.4.17를 설치 예정이다. 1. 리눅스 버전확인 rpm --query centos-release cat /etc/centos-release cat /etc/system-release 가장먼저 위 3가지중 1개방법으로 버전을 확인합니다 2. 해당 리눅스 버전에 맞는 Maria repoURL 찾기 https://downloads.mariadb.org/mariadb/repositories MariaDB - Setting up MariaDB Repositories - MariaDB To gener..
[DB] DBMS별 대용량의 Test Table 만드는법
2021. 1. 27. -- ORACLE CREATE TABLE test_large AS SELECT ROWNUM AS id , MOD(ROWNUM,100) AS grp --2000개씩 그룹핑 , DBMS_RANDOM.STRING('u',5) AS val --랜덤 문자5개 , DBMS_RANDOM.STRING('u',30) AS pad --랜덤문자 30개 FROM dual CONNECT BY ROWNUM
[Linux] 서버 다운(shutdown) 로그 확인
2021. 1. 26. 지난밤 서버에 무슨일이 있었는지, 우리 프로세스가 제대로 동작하지않거나, 죽어있는경우 서버가 강제종료되지않았는지, 재부팅된건 아닌지, 의심스러울때가 있다. 리눅스에서 서버 재부팅, 셧다운 등에 대한 로그를 남기고 종료되기 때문에, 서버에 대한 장애원인파악이 쉽다! 1. 재기동 (reboot) 기록 확인 - last last #전체 로그인/로그아웃, 시스템 시작/종료 기록을 확인할 수 있다. last -F # 연도를 포함하여 시간을 자세하게 표시한다. last -[숫자] # 최대 출력하는 라인 수를 지정한다. (최근순) last [계정명] # 특정 계정의 로그인/로그아웃 기록을 확인할 수 있다. last reboot # 시스템 재부팅 로그를 확인 할 수 있다. 가장 최근에 서버의 리부트 기록은 1월25일 ..
[MySQL] Windows 설치된 MySQL 8 드라이브 변경(C에서 D로 변경) , 재시작 Error해결
2020. 12. 18. MySQL을 C에 설치했다가, 용량이 부족하거나, tmp가 꽉차서 동작을 멈추거나, 서비스가 중지되는 경우가 발생할때, 다른 드라이버로 데이터를 옮기고 사용해야한다. MySQL은 Oracle같이 두개의 드라이브를 저장공간으로 사용하지 않는다. 옮기기는 간단하다. 1. MySQL 이전에 있던 데이터를 옮겨주고, 2. 시스템변수중 Datadir의 경로만 바꿔주면 끝이다, 1. 데이터 옮기기 C드라이브에 설치했다면, 데이터폴더는 C:\ProgramData\MySQL\MySQL Server 8.0\Data 에 있다. 원하는 드라이브에 경로를 만들어 Data 폴더를 옮겨주기만, 하면된다. D:\ProgramData\MySQL\MySQL Server 8.0\Data 필자는 위와같이 경로를 만들어 옮겨주었다. # 옮..
[원도우] Windows Server 2016 영문서버 한글변경
2020. 12. 17. Windows Server 2016 영문서버 완전히 한글변경하는 법을 알려드립니다. 유니코드 사용이 안되면, 한글로된 설치파일도 깨지며, 메모장도 utf, euc등을 읽어내지 못합니다. (notepad++을 써야함) 1. 언어 설정 설정창(Settings)에서 Time & language를 클릭합니다. 왼쪽 Date and time 탭이 기본으로 선택되어 있습니다. 해당 탭에서 Time zone를 (UTC+09:00) Seoul로 선택합니다. 저는 윈도우 서버 2016을 설치하면 (UTC+09:00) Seoul로 선택 했었습니다. 왼쪽에 Region & language 탭을 선택합니다. Contry or region은 Korea로 선택합니다. 저는 윈도우 서버 2016을 설치하면서 Korean (Kore..
[DB] MySQL 8.0 인코딩 설정 (utf-8, euc-kr)
2020. 12. 17. 인코딩은 서버 설정에 매우 중요하다, MySQL은 DB가 가지는 default Encording을 설정할수있고, 해당 DB 테이블마다 인코딩값을 가진다. 1. DB 인코딩확인 > mysql -uroot -p ******** > status 2. 원도우 서버 인코딩 변경 윈도우에 설치시 이런상황이 기본값이다. # 윈도우서버는 인코딩은 설정파일 my.ini 을 잘 변경해주고, C:\ProgramData\MySQL\MySQL Server 8.0 에 존재하며 위치확인도 가능하다. - my.ini 경로확인 > SHOW VARIABLES WHERE Variable_Name LIKE "%datadir" 파일 맨 마지막에 아래와 같이 추가한다 (저장시 인코딩 주의, 원본 백업 필수입니다.) euc-kr 설정 [clie..
[Oracle] 삭제된 테이블 복구
2020. 11. 25. 오라클 10g 부터는 윈도우의 휴지통과 같은 Recyclebin이 제공됩니다. DROP 한 테이블은 Recyclebin에 저장되며 복구가 가능합니다. 1. 휴지통에 있는 데이터 조회 SELECT * FROM RECYCLEBIN - 삭제된 정보가 나오며 ORIGINAL_NAME과 OPERATION을 활용하여 복구가 가능합니다. 2. 테이블 복구하기 FLASHBACK TABLE 테이블명 TO BEFORE DROP 복구할 테이블명에 이름이 아닌 "OBJECT_NAME"을 주어도 가능할것으로 보이나., 이름으로 복구할 때, 동일테이블명에 대해 여러오브젝트가 휴지통에 있는경우 가장 최근 삭제된 순서로 Flashback(복구) 됩니다. 대용량에 많은 테이블을 날렸을떈, 조건문으로 테이블들을 조회하여 CSV로 뽑고 ..
[CentOS] - JAVA 초간단 설치 (yum)
2020. 11. 24. Java 1.8 설치 (참고) # 설치가능 버전 확인 yum list java*jdk-devel # 설치 yum -y install java-1.8.0-openjdk-devel.x86_64 # 설치 상세빌드 버전확인 java -version # 환경변수 추가 vi /etc/profile JAVA_HOME=/usr/lib/jvm/java-1.8.0-openjdk-1.8.0.151-1.b12.el6_9.x86_64 # 환경변수 적용 (ssh 재접속으로도 확인가능) source /etc/profile # Javahome확인 echo $JAVAHOME
[CentOS] 7 - 초기Setup
2020. 11. 24. CentOS의 버전 확인 rpm --query centos-release cat /etc/centos-release cat /etc/system-release 가장먼저 요청한 서버종류가 맞는지, 버전이 맞는지 확인합니다. CentOS 7 초기 yum 업데이트 yum -y update 설치시 기본적으로 패키지의 사용을위해서 yum update 가 필수적입니다. 패키지 이름을 지정하지 않고 update시 현재 시스템에 설치된 패키지 모두를 업데이트합니다 (의존성 패키지 포함) CentOS는 yum 통해, Debian과 Ubuntu계열은 APT를 통해 소프트웨어 패키지설치를 하므로, yum은 필요한 패키지를 간편하게 할수있도록 인터페이스 역할을 합니다 yum 원격 저장소 정보 yum repolist 패키지 설..
[Linux] 자주사용하는 vi 단축키
2020. 8. 18. 1. 커서이동 맨앞으로 - 1G or gg 맨뒤로 - G 한페이지씩 위로 - PageUp 한페이지씩 아래로 - PageDown 한단어씩 앞으로 - w(word) 한단어씩 뒤로 - b(back word) 특정 라인으로 이동 - : 숫자 2. 파일 편집모드 ( i or o or a) i (insert)를 눌러야 현재파일 편집가능 ( a or o 도 가능) ESC 편집모드에서 나가기 3. 종료 단축키 : q - 저장하지않고 종료 : q! - 변경사항 저장하지않고 강제종료 (ZQ 도 사용) : wq - 저장후 종료 (ZZ 도 사용) 4. 검색 ( ? or / ) ? 검색어 - 검색어에 대한 텍스트를 찾아줌 (n , N으로 순회함) 5. 삭제와 되돌리기 u - 작업되돌리기 dd - 행 삭제 dw - 단어삭제 x ..
[Java] 호출 클래스, 호출 메소드 출력
2020. 8. 13. 호출클래스, 호출메소드 찍기 복잡한 호출구조를 가지고 어떠한 흐름으로 수행되고있는지 파악이 안될때, 혹은 에러 디버깅을 위해 상위 호출부분을 알고싶을때, 찍어보는 방법이있다. try{ throw new Exception(); }catch(Exception e){ System.out.println("Who did call me?"); System.out.println( e.getStackTrace()[1].getClassName() + " " + e.getStackTrace()[1].getMethodName() ); // StackTrace의 '1'번 인덱스를 가져오면 바로 상위 호출자를 가르키게 된다. 간단하게 확인 가능하다. 여기에 보면, 어떤 에러가 발생했는지(java.lang.Exception)와,..
[Linux] 환경변수 env, export,echo,unset
2020. 8. 12. 리눅스내 설정된 환경변수 List 보기 - env env 변수 선언 , 초기화 export export 변수명='변수값' 변수명=변수값 변수값 출력 echo echo $변수명 변수삭제 unset unset 변수명 bashrc 이용해서 항상 사용하기 vi ~/.bashrc export 변수명 = 변수값
[Linux] Alias 명령어 별칭
2020. 8. 12. 리눅스 상에 긴 명령어를 사용자가 정의하여 사용하는 방법 Alias Alias를 입력하면 별칭목록이나오며, cd 로 들어간 홈디렉토리에서 .bashrc에 정의해둘수 있다. 필자는 업무상 많이 이동하는 폴더나, 로그에 대한 Tail을 보기위해 정리해두었고, 프로세스 아이디를 얻거나, 관련서버를 죽이는 sh파일 실행에 대한 부분도 정의되있음을 볼수있다. .bash파일은 서버가 실행될때, 돌아가는 파일이고, .bashrc는 서버에 사용자가 로그인할때 실행되는 파일로, 사용자별 alias을 사용하기 위해서는 .bashrc 정의하여 사용해야한다. .bashrc 에 정의하여 수정작업이 이루어지면. 서버에 재 로그인을 해야 사용할수있다. .bash파일에 기록하여 수정한다면, 서버를 재부팅해주어야 alias를 사용할 ..
[Linux] top, cpu성능 모니터링, 실시간 상태
2020. 8. 12. 실시간으로 CPU 사용률 체크 : top 1줄 : 서버 시간 , 접속자수 , Summary - 서버시간, 서버구동일수, User 접속자, Load average(부하율) 2줄 : Task (프로세스) - 총 Task 수 , Running Task 수 , Sleep Task 수, Stop Task 수, Zombie Task 수 3줄 : CPU - us(user 사용자) , sy(system 사용비중) , id(유휴상태 비중) , wa ,si, st 4줄 : Memory (메모리) - Mem: 전체 물리적인 메모리(KBite), 사용중인 메모리(used), 사용되지 않는 여유 메모리(free), 버퍼된 메모리(buffers) - Swap : 전체 스왑 메모리, 사용중인 스왑 메모리, 남아있는 스왑메모리, 캐..
[AI] Classification - KNN python 예제
2020. 8. 11. k-Nearest Neighbors Target is predicted by local interpolation of the targets associated of the nearest neighbors in the training set 주변의 이웃을 보고 자신의 범주를 결정하는 알고리즘 1. KNN이란? 지도학습의 Classification 알고리즘 중 하나로, 가장 가까운 k개 이웃의 정보로 새로운 데이터의 Label을 예측하는 방법론입니다. 아래 그림처럼 검은색 점의 범주 정보는 주변 이웃들을 가지고 추론해낼 수 있습니다. 만약 k가 1이라면 오렌지색, k가 3이라면 녹색으로 분류(classification)하는 것이지요. 만약 회귀(regression) 문제라면 이웃들 종속변수(y)의 평균이 예..
[AI] Regression (회귀) 개념, 분류
2020. 8. 7. 1. 회귀분석 개념 ML Supervised Learning(지도학습)에 Classification에 이어, Regression의 개념과 사용알고리즘의 종류를 알아보자 회귀분석은 데이터 변수들간에 함수관계를 파악하여 통계적 추론을 하는 기술이다. 좀더 쉽게 설명하자면, 독립변수에 대한 종속변수값의 평균을 구하는 방법입니다. h() 가 위에서 말한 조건에 따른 평균을 구하는 함수이며 우리는 이것을 보통 ‘회귀 모델’이라고 부릅니다. 이 함수는 어떤 조건(x1, x2, x3, …)이 주어지면 각 조건의 영향력(beta1, beta2, beta3, …)을 고려하여 해당 조건에서의 평균값을 계산해 주는 것인데, 뒤에 붙는 e 는 ‘오차항’을 의미한다. 측정상의 오차나 모든 정보를 파악할 수 없는 점 등 다양한 ..
[AI] Classification (분류) 개념과 알고리즘 종류
2020. 8. 7. 1. Classification(분류) 말 그대로 분류를 뜻하는 Classification은 Supervised learning 지도학습의 일종으로 기존에 존재하는 데이터의 Category 관계를 파악하고, 새롭게 관측된 데이터의 Category를 스스로 판별하는 과정이다. 예를 들어 문자를 판별하여, 스팸 보관함으로 분류하는것과 같은 단일분류와 , 수능 점수가 몇 등급에 해당하는지 판별하는 종류의 다중분류가 있다. 다중분류는 비지도학습의 Clustering과 비슷하지만, 가장 큰 차이점은 Category의 도메인이 정의되있는가 그렇지 않은가이다. 지도학습의 Classification은 이미 정해진 카테고리(레이블) 안에서 학습하여 새로운 데이터를 분류하지만, 비지도학습의 Clustering은 정해지지 ..
[AI] Clustering (군집화) 개념과 알고리즘 종류
2020. 8. 7. 1. 군집화(Clustering) 란? 비지도학습의 대표적인 기술로 x에대한 레이블이 지정 되어있지 않은 데이터를 그룹핑하는 분석 알고리즘 데이터들의 특성을 고려해 데이터 집단(클러스터)을 정의하고 데이터 집단의 대표할 수 있는 중심점을 찾는 것으로 데이터 마이닝의 한 방법이다. 클러스터란 비슷한 특성을 가진 데이터들의 집단이다. 반대로 데이터의 특성이 다르면 다른 클러스터에 속해야 한다. 2. 알고리즘 종류 (1) K 평균 (K-Means) 군집 중심점(centroid)라는 특정한 임의의 지점을 선택해 해당 중심에 가장 가까운 포인트들을 선택하는 군집화기법 선택된 포인트의 평균지점으로 이동하고 이동된 중심점에서 다시 가까운 포인트를 선택, 다시 중심점을 평균 지점으로 이동하는 프로세스를 반복적으로 수행..

티스토리툴바