게임프로그래밍

위와 같은 서브 쿼리문은 아래와 같은 에러를 발생시킨다. 그이유는 '=' 때문이다. 'IN'으로 바꾸어야 한다.

DB에 없는 값을 주었으면 당연히 rowcount는 0으로 나와야 정상인데...

row_result 의 값이 0이 아니라 -1로 나오길래 찾아보니 아래와 같은 설정을 해주어야 하나보다.

해결 방법

mysql.connector.connect 맨 뒤에 buffered=True 추가

설정하니 0으로 나온다.

위와 같이 mysql에서 fetchall()함수를 사용하여 JSON 값을 가져오면 대부분 list 형태이다.

위의 코드는 list를 dict type으로 바꾼거다.

json.dump()함수는 dict type의 데이터를 json문법의 str으로 바꾸어주는 함수이다.

이 함수를 사용하려면 json을 import 해주어야 한다.

한대로 json 문법의 str을 dict type으로 바꾸고 싶다면 json.loads()함수를 사용하면 된다.

위와 같은 에러가 발생하는 원인은 두가지로 볼 수 있겠다.

1. namenode와 datanode가 연동 되지 못해서..(커맨드에 jps를 쳤을때 Master에서 namenode가 안보이거나 Slave에서 datanode가 안보일때)

2. hdfs의 디스크 용량이 가득 찼을때

특정 디스크에 블록이 집중되는 것을 방지하고 고르게 분포되게 끔 balancer를 주기적으로 실행.

만약 slave 모두 용량일 부족하다면 백업을 할 수 밖에 읍다ㅠㅠ

해결 방법 :

yarn-site.xml 파일에 다음과 같은 코드 작성

필자는 sqoop --options-file [파일명] 명령어 입력시

다음과 같은 에러가 발생하였다.

위와 같은 에러 발생시 두가지 이유로 

1. 해당 서버에서 mysql port를 개방하지 않아서 발생

해결방법 : mysql port 개방(mysql 디폴트 포트는 3306, 필자는 3309로 mysql 사용할려고 3309로 포트 개방)

2. 해당 계정에 mysql 접근 권한이 없어서 발생

해결 방법 : 접근 권한 부여