2014/03

어나니머스 2014년 4월 14일 한국 정부 공격 예고

한국시간 13일에 한국정부를 공격하겠다는 선전포고를 했다. 자세한 사항은 https://twitter.com/AnonOpsokore(@AnonOpsokor)

[BigData] Hadoop Eco System

Hadoop Eco System Concept 전체 흐름도 : 수집 -> 저장 -> 처리 -> 분석 -> 시각화 수집(Flume, Sqoop, Crawler) : 시스템 데이터를 HDFS로 가져온다. : 가져올때는 64MB 사이즈의 블록으로 병렬 수집한다. : 복제하여 분산 저장 : METAdata 저장(datanode 블록 위치 정보) 저장(Pig, Hive, Hbase) : Pig - 비정형(Unstructured) 데이터 (전처리)수집, 정교한 데이터 처리 가능, 프로그래머 접근성 쉬움, UDF 사용자 정의 함수 제공, yahoo에서 개발 : Hive - 정형(Structured) 데이터(전처리) 수집, 하둡 기반의 DW, 정교한 데이터 조작 불가능, DBA 접근성 쉬움, ETL 사용, facebo..