Hee'World

데이터 분석을 위한 파이썬 필수라이브러리데이터 분석을 위해서는 분석할 문제를 정의하는 단계에서 분석결과를 보고하는 단계까지 여러단계가 이루어진다고 포스팅했습니다. 이 중 첫 4단계는 컴퓨터의 도움없이 연필과 종이로 충분히 할 수 있습니다. 하지만, 실제 데이터를 수집하고, 가공해서, 보여주는 단계에 이르면 수작업만으로는 한계가 있습니다. 파이썬은 데이터 분석을 위한 다양한 라이브러리를 제공합니다. 데이터를 수집하고, 가공하고, 시각화하는 데 필수적인 파이썬 라이브러리를 소개하도록 하겠습니다.데이터 수집 - Beautiful SoupBeautiful Soup 라이브러리는 강력한 HTML 파싱 라이브러리입니다. 우리가 분석을 위해 수집하는 데이터의 대부분은 웹 상에 존재합니다. 웹페이지는 태그가 포함된 HT..

파이썬에서 데이터파일을 불러올때 아래와 같은 에러가 발생 시 IOError: [Errno 22] invalid mode('r') or filename: 아래의 3가지 방법을 이용하여 해결하면 된다. \t is a tab character. Use a raw string instead:test_file=open(r'c:\Python27\test.txt','r')or double the slashes:test_file=open('c:\\Python27\\test.txt','r')or use forward slashes instead:test_file=open('c:/Python27/test.txt','r')

install.packages("RMySQL") #R과 MySQL연동을 위한 패키지를 다운로드 합니다.library(RMySQL) # RMySQL 패키지를 로드합니다. 1. Connect and authenticate to one or more MySQL databases:con

ui.R shinyUI(pageWithSidebar(...)) - 평범한 UI레이아웃을 사용.headerPaner() - shiny 애플리케이션의 제목.sidebarPanel() - 애플리케이션의 컨트롤을 설정.mainPanel() - 출력영역 설정.textInput() - 텍스트 박스를 만들고 사용자가 입력한 텍스트를 받아들인다.inputId : 변수에 이름을 정하며, 이 이름은 server.R 파일에서 참조할 수 있다.label : 입력 부분에 레이블을 부여하는 것으로 사용자에게 그것의 용도를 알려준다.value : 처음 실행될 때 위젯의 초기값을 부여한다. 모든 위젯은 이 인자에 대해서 센스 있는 초기값을 가지고 있는데, 이 경우는 빈 문자인 ""이다.dateRangeinput() - 날짜 위젯이며..

샤이니 프로그램은 같은 폴더에 존재하는 두 개의 스크립트 파일을 사용하여 만들어진다. 그 스트립트 파일은 각각 server.R과 ui.R 이라는 이름을 가져야 한다. 샤이니 프로그램을 실행하는 순서는 다음과 같다.1. server.R과 ui.R과 같은 폴더에 존재해야 한다.2. 그리고 R의 워킹디렉토리로 설정해야 한다. (setwd("워킹디렉토리"))3. 샤이니 패키지를 로딩한다. (library(shiny))4. 콘솔에서 runApp()을 입력한다. 간단한 샤이니 프로그램 작성R스크립트로 작성합니다.ui.R # ui.R# R Shiny 어플리케이션 연습 library(shiny) shinyUI(pageWithSidebar( # 표준 샤이니 레이아웃으로 # 왼쪽은 컨트롤, 오른쪽은 아웃풋이 놓인다. he..

샤이니패키지는 최신 웹 브라우저를 사용하여 인터랙티브한 데이터 정리와 질의를 믿기 어려울 정도로 쉽게 할 수 잇는 기능을 제공한다. 샤이니 패키지에는 다양한 위젯이 있어 사용자 인터페이스와 인터랙티브 기능을 쉽고 빠르게 구현할 수 있다. 샤이니 어플리케이션이 가진 디폴트 스타일 자체도 간결하고 효과적이지만 확장이 가능할 뿐더러, HTML과 CSS로 만든 사용자 컨텐츠를 쉽게 통합시킬 수 있다. 샤이니 애플리케이션의 기본 기능을 능가하는 기능을 구현하기 위해 자바스크립트나 제이쿼를 합께 사용할 수 있다. 샤이니 패키지 설치> install.packages("shiny")Installing package into ‘C:/Users/JeonJongHee/Documents/R/win-library/3.0’(as..

Other Hadoop-related projects at Apache include:Ambari™: A web-based tool for provisioning, managing, and monitoring Apache Hadoop clusters which includes support for Hadoop HDFS, Hadoop MapReduce, Hive, HCatalog, HBase, ZooKeeper, Oozie, Pig and Sqoop. Ambari also provides a dashboard for viewing cluster health such as heatmaps and ability to view MapReduce, Pig and Hive applications visually a..