it개발자스터디공간

이번 빅데이터공부하기 9번째 글은 웍플로우 실행 및 관리에 대해서 올립니다.

빅데이터공부하시는 분들 !!! 아자아자!! 파이팅하자구요 ^----^

그럼 빅데이터공부하기 9번째 글을 써보도록 할께요..

웍플로우 실행 및 관리

- 계속정으로 발생하는 데이터의 처리를 위해 처리작업들의 실행이 자동화되어야함

* 복잡한 ETL 작업의 경우 수십개의 job들의 chaining이 필요

* 주기적으로 혹은 데이터가 특정 위치에 생기면 특정 Job을 시작하게 하는

   메커니즘이 필요. 즉, 웍플로우 관리가 필요.

- 몇개의 오픈소스 프로젝트가 널리쓰임.

* Oozie, Cascading, Azkaban, Hamake, ...

빅데이터공부하기 9] 웍플로우 실행 및 관리

잠깐만요 !!

빅데이터RHADOOP 오프라인 강좌를 원하신다면!!

클릭을 눌러주세요^^

이번 빅데이터공부하기 8번째 글은 데이터저장과 처리입니다.

확인해보세요 ^^

데이터저장과 처리

- 대부분의 빅 데이터 시스템에서 이 역할을 하는 것은 바로 하둡

* 데이터의 저장소이자 프로세싱 브레인

* 이 강의의 핵심

- 프로세싱을 위해서 여러가지 언어가 만들어짐

* Java MapReduce, Hive, Pig, Streaming, Pipe, ...

- 하둡을 기반으로한 생태계가 만들어지고 있으며 많은 회사들이 관련

   소프트웨어 / 서비스를 만들고 있음

* IBM, EMC/Greenplum, EMC/VMWare, Amazon, Microsoft, SAS, SAP,  

  Cloudera, HortonWorks, MapR, ...

빅데이터공부하기 8 - 데이터저장과 처리

빅데이터공부하기 7 -데이터수집

빅데이터공부하기 7번째 글에서는 빅데이터 시스템의 구성에 대해 알아볼건데요.

이번글은 데이터수집에 대해서 글을 올리겠습니다. ^^

데이터수집

- 빅데이터의 시작은 데이터를 수집하여 처리할 수 있는 장소로 올리는 것입니다.

- 데이터의 용량이 큰 경우 데이터의 수집자체가 큰 문제입니다.

* 네트웍을 타고 업로드하는 자체가 오랜 시간이 걸립니다.

   많은 경우 데이터발생소스와 하둡을 같은 데이터센터에서 고속네트웍으로 연결

- 몇가지 오픈소스 솔루션이 많이 쓰입니다.

* Flume : Cloudera에서 만들어서 지금 Apache 오픈소스.

* Chukwa : Apache 오픈소스

* 기본적으로 분산환경을 기반으로 여러대의 데이터소스로부터 데이터를 받아다가 계층구조 형태로 머징하는 형태의 구조를 갖고 있으며 데이터 푸시보다는 데이터 풀링을 많이 사용합니다.

다음글에서는 데이터 저장과 처리에 대해 글을 올리겠습니다.

빅데이터공부하기!! 빅데이터공부하시는분들 모두들 파이팅하세요!!

* 빅데이터 오프라인 교육입니다.

빅데이터 RHADOOP 실무과정 환급과정입니다.

원하시는 분들은 교육과정명을 클릭해보세요 ^^

빅데이터공부하기 7 -데이터수집

C#공부하기 11 - 문자열형

C#공부하기 11번째 글입니다.

지난 글에서 C#기본 데이터형의 종류에 대해서 알아보았는데요.

단순형에서는 정수형, 부동소수점형, 데시멀(10진소수),논리값형, 문자열형, 오브젝트형이 있었습니다.

그 중 이번 글에서는 문자열형에 대해서 알아보도록하겠습니다.

문자열형

** C#어플리케이션 개발과정 오프라인 환급강좌 보러가기 **

과정명을 클릭해보세요 ^^

C#공부하기 11 - 문자열형

WPF공부하기 8 - Console클래스 입력받기

WPF공부하기 8번째 글입니다.

지난글에서는 출력하기와, 출력양식에 대해서 글을 기재하였습니다.

이번글에서는 Console 클래스 입력받기에 대해서 글을 올리겠습니다.

시작해볼까요!??!!

Console 클래스 - 입력받기

- ReadLine 메소드의 용법

* string str = Console.ReadLine();

* 한줄 입력이 끝날 때 까지 기다리고, 그 내용을 str에 string으로 저장

- Read 메소드

* int i = Console.Read();

* 역시 한줄 입력이 끝나면, 그 중 한글자만 가지고 오고 나머지는 임시 저장 창고 (버퍼)에 저장해둡니다.

- Console.Read() 를 다시 호출하면 다시 버퍼에서 한글자를 가지고 옵니다. 더 이상 가지고 올 글자가 없으면 화면 대기 상태로 들어갑니다.

WPF공부하기 8 번째글은 여기까지입니다.

WPF공부하기 6번째글부터 8번째 글까지 읽어보시고

많은 도움이 되시길 바랍니다. ^-^

더욱 더 노력하는 OracleJava it공부하자 티스토리가 될 것입니다!!

잠깐만요!!

WPF 프로그래밍 실전 어플리케이션 개발과정

오프라인 교육과정입니다. ^^ 확인해 보실분은 과정명을 클릭해보세요,

WPF공부하기 8 - Console클래스 입력받기

HTML공부하기 7-2 <font color>

HTML공부하기 7-2 번째 글입니다.

계속해서 <font>태그의 공부를 하고있는데요 ^^

이번엔 글자 색을 넣어보려고 합니다.

글자색은 <font color=" 색상명 "> 또는 <font color="#RGB"> 를 이용해서 색을 넣습니다.

그럼 지난글들의 HTML공부하기 복습도 같이 하면서 예제를 보시겠습니다.

저장 ----> html공부7-2.html

결과를 보시겠습니다.

이해가 안가시면 뎃글로 남겨주세요 ^^

표준웹&HTML5&jQuery&Ajax 실무과정 - 평일주간 환급강좌 보러가기 클릭!!!

HTML공부하기 7-2 <font color>

WPF공부하기 7번째 글입니다. ^^

지난글에서는 Console 클래스 출력을 해보았는데요..

오늘은 출력양식에 대해 글을 올리겠습니다.

지난 글을 보시기 힘드실까봐 다시한번 적어드립니다. ^=^ (짱이죠..히힛)

지난글에 올렸던 예제입니다.

출력양식을 보겠습니다.

출력양식{A,B:XY}

-> A=0,1,2...

* Write메소드의 몇번째 파라미터인지를 지시

-> B=...,-2,-1,0,1,2,...

* 출력시 몇칸을 차지할지를 지시

* -값은 왼쪽으로 +값은 오른쪽으로 붙여서 출력

-> X는 알파벳으로 수의 형식을지정

* C : 화폐단위        \10,000           D : 실수형 10.12

* E : 지수형           1.24E+4            F : 고정소수점

* G : 가장 간단하게 (컴파일러 마음대로)

* N : 콤마표시        10,000              X : 16진수 10FA

-> Y = 0, 1, 2, ...

* 소수점 자리수를 지정

다음시간에는 Console 클래스 - 입력받기로 글을 기재하겠습니다.

- WPF공부하기 7 Console 클래스 - 출력양식

HTML공부하기 7번째 글에서는 <font>태그에 대해서 배웠습니다.

이번 HTML공부하기 7-1 글에서도 <font>에 대해서 계속 배우도록 하겠습니다.

<basefont size="n">태그

<basefont size="n">는 HTML문서의 기본 글씨크기를 정해주는 것입니다.

시작은 <basefont size="n">으로 시작하지만 끝날때는 </basefont>라고 따로 지정해주지 않습니다.

예제를 보시겠습니다.^^

저장은 ----> html공부7-1.html

결과를 보실까요??

여기까지 <basefont size="n">을 공부하면서 <font size="+n">,<font size="-n">을 같이 공부를 해봤는데요^^

눈으로 보시지만 말고 직접 해봐야 한다는거.. 알고 계시죠 ??^^

다음 글에서 또만나요 ~~~

HTML공부하기 7-1 <basefont size="n">태그