[필기] 18.01.17

[하둡 에코시스템 설치]

ex. a dog is a dog

a        1

dog    1

is        1

a        1

dog    1

이런식으로 읽어드린대로 세고

Rack으로 보내서 계산-> 고성능의 기술이 필요한게 아니라

많은 데이터를 단순계산하는것 => 분산처리 : 하둡(단순작업이지만 많이 뽑아내는것)

빅데이터는 왜 필요하지?

다양한 의견이 있겠지만 예전엔 몰랐지만

쌓이고 쌓인 데이터를 분석해서 의미있는 데이터를 뽑아내는것으로

더 좋은 방향으로 가는것

p.29 http://hadoop.apache.org/ - 하둡 공식 사이트

맵리듀스, HDFS

Nosql : sql이 아니다가 아니라 컬럼이 존재 하지 않는 sql임

관계형이 아닐뿐이다.

이건 db가 아니라 파일을 분산 처리하는 시스템일뿐이다.

ram16gb ssd256 이상, hdd256gb이상

vi에디터 hjkl 화살표 익숙해지기

---------------------------------------------------------------------------------------------------

https://github.com/watson-developer-cloud/java-sdk -왓슨

jar파일 here클릭

자바에 임포트 시키고

왓슨.net으로 가서 username, pwd, workid가져오기