본문 바로가기

전체 글449

Shiny에서 SparkR 실행하기 Shiny와 SparkR을 통해서 웹으로 분석결과 보여주기 server.R에서는 glm 을 통해서 회귀 모델을 구해서 웹에서 변수값에 따른 결과를 보여준다. server.R # First install shiny library library(shiny) library(ggfortify)# Set the system environment variables Sys.setenv(SPARK_HOME = "C:/app/gitProjects/spark") .libPaths(c(file.path(Sys.getenv("SPARK_HOME"), "R", "lib"), .libPaths()))#load the Sparkr library library(SparkR)# Create a spark context and a SQ.. 2016. 3. 28.
맥처럼 화면을 이동하는 가상 테스크탑 기능 윈도우 10은 필요에 따라 화면을 추가하는 '가상 데스크탑' 기능을 쓸 수 있다. 가상 데스크탑 기능은 프리젠테이션 도중 데모 시연을 위해 화면을 빠르게 전환할 수 있다는 점에서 만족할 수 있다. 멀티 모니터를 사용하는 것과 같은 환경을 가상으로 제공할 수 있기 때문에 한정된 화면을 효율적으로 배치해 쓸 수 있다.단축키 컨트롤(Ctrl)+윈도우+D키를 누르면 즉시 만들어된 새 데스크탑 화면으로 이동하며, 컨트롤+윈도우+방향키를 누르면 간편하게 원하는 데스크탑 화면으로 바꿀 수 있다. 화면 전환을 위한 마우스 클릭은 필요하지 않다. 단축키를 잘 알고 있으면 동선을 줄여 프리젠테이션의 흐름을 잘 이을 수 있다.액션 센터는 윈도우 10의 이벤트 내용, 장치에서 활성화된 주요 기능을 한 눈에 볼 수 있는 화면이.. 2016. 3. 27.
RStudio 에서 Spark 사용하기 로컬모드로 Spark 를 띄우기 위해 먼저 Spark 부터 받자 http://spark.apache.org 혹은 새로 빌드를 하거나 [INFO] Reactor Summary: [INFO] [INFO] Spark Project Parent POM ........................... SUCCESS [ 13.980 s] [INFO] Spark Project Test Tags ............................ SUCCESS [01:04 min] [INFO] Spark Project Sketch ............................... SUCCESS [ 20.141 s] [INFO] Spark Project Networking ....................... 2016. 3. 26.
Apache NiFi 사용기 간단하게 NiFi를 사용해보자 바이너리를 받아도 되지만 어떤게 있는지 보기 위해 git 에서 소스를 받아서 빌드 해보자. git clone https://github.com/apache/nifi.git mvn install -Dmaven.test.skip=true 빌드를 했다면 아래 위치에 있고 바이너리를 받았다면 bin 아래에 있다. nifi/nifi-assembly/target/nifi-0.6.0-SNAPSHOT-bin/nifi-0.6.0-SNAPSHOT/bin/run-nifi.bat 기본적으로 8080 포트를 사용하기 떄문에 확인하고 수정이 필요할 수 있다. 웹서버가 실행되는데 몇 초 정도 시간이 걸리니 웹브라우저에서 바로 나타나지 않을 수 있다. 잠시 기다렸다가 접속해보면 아래와 같이 보인다. 주.. 2016. 3. 26.
Apache NiFi 둘러보기 Table of ContentsWhat is Apache NiFi?The core concepts of NiFiNiFi ArchitecturePerformance Expectations and Characteristics of NiFiHigh Level Overview of Key NiFi FeaturesReferencesWhat is Apache NiFi?Put simply NiFi was built to automate the flow of data between systems. While the term dataflow is used in a variety of contexts, we’ll use it here to mean the automated and managed flow of informa.. 2016. 3. 26.
Apache NiFi 시작하기 Table of ContentsWho is This Guide For?Terminology Used in This GuideDownloading and Installing NiFiStarting NiFi For Windows UsersFor Linux/Mac OSX usersInstalling as a ServiceI Started NiFi. Now What? Adding a ProcessorConfiguring a ProcessorConnecting ProcessorsStarting and Stopping ProcessorsGetting More Info for a ProcessorOther ComponentsWhat Processors are Available Data TransformationRou.. 2016. 3. 26.
Stream Processing: NiFi and Spark Without doubt, Apache Spark has become wildly popular for processing large quantities of data. One of the key features that Spark provides is the ability to process data in either a batch processing mode or a streaming mode with very little change to your code. Batch processing is typically performed by reading data from HDFS. There have been a few different articles posted about using Apache Ni.. 2016. 3. 26.
Mechs & Mercs: Black Talons 소개 (번역기) 좋은 실시간 게임을 찾는 것은 점점 어려울 것이다. 그 이유 중 하나는 당신이 당신의 장치를 제어 할 수 있도록 유능한 및 간소화 된 인터페이스를 필요가 있기 때문에, 좋은 실시간 전략 게임을 만들기 위해 정말, 정말 어려운 것이 사실이다.전투는 턴 기반 방식으로 이루어 갖는 것은 개발자 오프 압력이 많이 걸립니다, 그리고 훨씬 더 관리가 평균 이하의 AI와 투박한 인터페이스를 만든다.개발자 낙타 1010 메크 & 용병 작업을 시작 때, : 검은 발톱, 그들은 이미 장르의 특이성에 대해 오르막 전투를 직면했다. 의이 뛰어 그들이 지냈다 얼마나 잘 보자.검사 범위환경이 게임은 우주 어딘가에서 일어난다. 당신은 공격을 받고 현재 은하의 섹션에서 좌초 용병 회사의 사령관의 역할을 재생할 수 있습니다.군국주의 .. 2016. 3. 25.
Loading RCFile Format Data into Oracle Database Loading RCFile Format Data into Oracle DatabaseSetting the EnvironmentCreating a Hive Table Stored as RCFileRCFile StructureLoading Hive Table Data into Oracle DatabaseRCFile or Record Columnar File format is a flat file data placement structure consisting of binary key/value pairs. Record Columnar implies that columns of a table are stored in a record columnar format. For comparison, in a relat.. 2016. 3. 25.
Bringing ORC Support into Apache Spark By Zhan Zhang on July 16th, 2015 In version 1.2.0, Apache Spark introduced a Data Source API (SPARK-3247) to enable deep platform integration with a larger number of data sources and sinks. We are proud to announce that support for the Apache Optimized Row Columnar (ORC) file format is included in Spark 1.4 as a new data source. This support was added through a collaboration between Hortonworks .. 2016. 3. 25.
A Lap Around Apache Spark on HDP If you have any errors in completing this tutorial. Please ask questions or notify us on Hortonworks Community Connection!IntroductionThis tutorial walks you through many of the newer features of Spark 1.6 on YARN.With YARN, Hadoop can now support many types of data and application workloads; Spark on YARN becomes yet another workload running against the same set of hardware resources.The tutori.. 2016. 3. 25.
Learning the Ropes of the Hortonworks Sandbox IntroductionThis tutorial is aimed for users who do not have much experience in using the Sandbox. We will install and explore the Sandbox on virtual machine and cloud environments. We will also navigate the Ambari user interface. Let’s begin our Hadoop journey.Pre-RequisitesDownloaded and Installed Hortonworks SandboxOutlineWhat is the Sandbox?Step 1: Explore the Sandbox in a VM – 1.1 Install t.. 2016. 3. 25.

티스토리툴바