'Development/Java' 카테고리의 글 목록

2019.11.17 08:01

IRIS.ARFF 데이터 셋 Development/Java

IRIS.ARFF 데이터 셋

웨카(WEKA) 설치 시 데이터 디렉토리에 설치되어 있는 아이리스 데이터셋입니다.

IRIS.ARFF 데이터 셋 파일

C:\Program Files\Weka-3-8\data\iris.arff

IRIS.ARFF 데이터 셋의 헤더 부분 정보

속성	설명
Sepal Length	꽃받침의 길이에 대한 정보입니다.
Sepal Width	꽃받침의 너비에 대한 정보입니다.
Petal Length	꽃잎의 길이 정보입니다.
Petal Width	꽃잎의 너비에 대한 정보입니다.
Class	꽃의 종류 정보인데 Setosa / Versicolor / Virginica 의 3종류로 구분되며 이는 곧 같은 세가지 종류의 붓꽃으로 분류된 데이터 결과를 보여주는 것입니다.

@RELATION

@RELATION "이름"

· 데이터 셋은 @RELATION으로 선언합니다.

· 문자열로 데이터 셋의 이름을 명시하는데 이는 'iris'로 정의되어 있습니다.

@attribute

@attribute [attribute-name] [datatype]

· 속성은 @attribute로 선언하여 속성이름을 나타내는 문자열, 데이터 유형을 지정합니다.

· REAL은 실수형 속성으로 정의하고, 속성 class는 Iris-setosa, Iris-versicolor, Iris-viginica 라는 3개의 값을 가지는 속성으로 정의되어 있습니다.

@RELATION iris

@ATTRIBUTE sepallength REAL

@ATTRIBUTE sepalwidth REAL

@ATTRIBUTE petallength REAL

@ATTRIBUTE petalwidth REAL

@ATTRIBUTE class {Iris-setosa,Iris-versicolor,Iris-virginica}

IRIS.ARFF 데이터 셋의 본문 부분 정보

· 본문 부분은 @DATA로 시작합니다.

· 각 라인은 데이터의 행을 나타내는 레코드를 의미합니다.

· 데이터 속성의 값들은 헤더에 정의된 속성 정의 순서를 따르게 됩니다.

@DATA

5.1,3.5,1.4,0.2,Iris-setosa

4.9,3.0,1.4,0.2,Iris-setosa

4.7,3.2,1.3,0.2,Iris-setosa

4.6,3.1,1.5,0.2,Iris-setosa

5.0,3.6,1.4,0.2,Iris-setosa

5.4,3.9,1.7,0.4,Iris-setosa

4.6,3.4,1.4,0.3,Iris-setosa

5.0,3.4,1.5,0.2,Iris-setosa

4.4,2.9,1.4,0.2,Iris-setosa

4.9,3.1,1.5,0.1,Iris-setosa

5.4,3.7,1.5,0.2,Iris-setosa

저작자표시비영리

'Development > Java' 카테고리의 다른 글

IRIS.ARFF 데이터 셋 (0)	08:01:14
weka.clusterers.SimpleKMeans 명령어 옵션 (0)	2019.11.16
commons-math library - 수학과 통계관련 기능을 제공하는 라이브러 (0)	2019.11.16
Wrapper클래스 활용 (0)	2019.11.14
SimpleDateFormat (0)	2019.11.13
WEKA API documentation (0)	2019.11.10

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.16 12:01

weka.clusterers.SimpleKMeans 명령어 옵션 Development/Java

weka.clusterers.SimpleKMeans 명령어 옵션

K-평균(K- MEANS) 군집분석을 수행하기 위한 SimpleKMeans 클래스 실행시 필요한 옵션들입니다.

옵션

설명

-N

SimpleKMeans가 만들 클러스터의 개수를 지정합니다.

-A

사용할 거리(distance) 함수를 지정합니다.

기본값은 유클리디언 거리(EuclideanDistance )이며, (-R first -last)에 따라 값의 전체 범위를 사용합니다.

-l

k-means가 클러스터를 만들기 위해 반복할 횟수입니다.

-S

난수의 시드(seed)값을 지정합니다.

-t

웨카가 클러스터링하려는 훈련용 파일을 지정합니다.

-p

각 행에 클러스터 인스턴스의 할당을 보여줍니다. 이 기능을 사용하려면 각 행마다 어떤 데이터 속성을 사용할지 웨카에 알려주어야 합니다.

플래그	설명
-p 0	행 번호와 클러스터 식별번호가 표시됩니다.
-p 1	-p 0 결과에 x 위치 값이 함께 표시됩니다.
-p 2	-p 0 결과에 y위치 값이 함께 표시됩니다.

저작자표시비영리

'Development > Java' 카테고리의 다른 글

IRIS.ARFF 데이터 셋 (0)	08:01:14
weka.clusterers.SimpleKMeans 명령어 옵션 (0)	2019.11.16
commons-math library - 수학과 통계관련 기능을 제공하는 라이브러 (0)	2019.11.16
Wrapper클래스 활용 (0)	2019.11.14
SimpleDateFormat (0)	2019.11.13
WEKA API documentation (0)	2019.11.10

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.16 11:56

commons-math library - 수학과 통계관련 기능을 제공하는 라이브러 Development/Java

commons-math library

수학과 통계관련 기능을 제공하는 라이브러리 입니다.

https://commons.apache.org/proper/commons-math/

http://commons.apache.org/proper/commons-math/download_math.cgi

http://apache.mirror.cdnetworks.com/commons/math/binaries/

파일을 풀면 API 문서도 확인할 수 있습니다.

직접 다운로드

commons-math3-3.6.1.jar

commons-math3-3.6.1.z01

commons-math3-3.6.1.z02

commons-math3-3.6.1.zip

저작자표시비영리

'Development > Java' 카테고리의 다른 글

IRIS.ARFF 데이터 셋 (0)	08:01:14
weka.clusterers.SimpleKMeans 명령어 옵션 (0)	2019.11.16
commons-math library - 수학과 통계관련 기능을 제공하는 라이브러 (0)	2019.11.16
Wrapper클래스 활용 (0)	2019.11.14
SimpleDateFormat (0)	2019.11.13
WEKA API documentation (0)	2019.11.10

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.14 08:54

Wrapper클래스 활용 Development/Java

Wrapper클래스 활용

· 기본 자료형을 참조자료형으로 변환할 때(객체로 사용할 때) 사용하는 클래스입니다.

· 대표적으로 제네릭 클래스의 객체 생성시 활용됩니다.

· 래퍼 클래스(Wrapper class)는 산술 연산을 위해 정의된 클래스가 아니므로, 인스턴스에 저장된 값을 변경할 수 없습니다. 단지, 값을 참조하기 위해 새로운 인스턴스를 생성하고, 생성된 인스턴스의 값만을 참조할 수 있습니다.

저작자표시비영리

'Development > Java' 카테고리의 다른 글

weka.clusterers.SimpleKMeans 명령어 옵션 (0)	2019.11.16
commons-math library - 수학과 통계관련 기능을 제공하는 라이브러 (0)	2019.11.16
Wrapper클래스 활용 (0)	2019.11.14
SimpleDateFormat (0)	2019.11.13
WEKA API documentation (0)	2019.11.10
WEKA - arff Dataset (0)	2019.11.10

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.13 14:42

SimpleDateFormat Development/Java

SimpleDateFormat

날짜 표현 형식 설정

SimpleDateFormat("yyyy-MM-dd a hh:mm:ss")

형식문자	의미
y	년
M	월
d	일
a	AM/PM
H	시간(0~23)
h	시간(1~12)
m	분
s	초

https://docs.oracle.com/javase/10/docs/api/java/text/SimpleDateFormat.html

저작자표시비영리

'Development > Java' 카테고리의 다른 글

commons-math library - 수학과 통계관련 기능을 제공하는 라이브러 (0)	2019.11.16
Wrapper클래스 활용 (0)	2019.11.14
SimpleDateFormat (0)	2019.11.13
WEKA API documentation (0)	2019.11.10
WEKA - arff Dataset (0)	2019.11.10
Hadoop - install for windows (설치 및 설정하기) (0)	2019.11.10

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.10 13:16

WEKA API documentation Development/Java

WEKA API documentation

http://weka.sourceforge.net/doc.dev/overview-summary.html

저작자표시비영리

'Development > Java' 카테고리의 다른 글

Wrapper클래스 활용 (0)	2019.11.14
SimpleDateFormat (0)	2019.11.13
WEKA API documentation (0)	2019.11.10
WEKA - arff Dataset (0)	2019.11.10
Hadoop - install for windows (설치 및 설정하기) (0)	2019.11.10
오버라이딩(Overriding) vs 오버로딩(Overloading) (0)	2019.11.07

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.10 08:19

WEKA - arff Dataset Development/Java

WEKA - arff Dataset

ReutersCorn-test.arff

0.49MB

ReutersCorn-train.arff

1.17MB

ReutersGrain-test.arff

0.49MB

ReutersGrain-train.arff

1.17MB

segment-challenge.arff

'Development > Java' 카테고리의 다른 글

SimpleDateFormat (0)	2019.11.13
WEKA API documentation (0)	2019.11.10
WEKA - arff Dataset (0)	2019.11.10
Hadoop - install for windows (설치 및 설정하기) (0)	2019.11.10
오버라이딩(Overriding) vs 오버로딩(Overloading) (0)	2019.11.07
오버라이딩(Overriding), 재정의된 멤버 함수의 호출 순서, 오버라이딩 사용 이유 (0)	2019.11.07

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.10 00:30

Hadoop - install for windows (설치 및 설정하기) Development/Java

Hadoop - install for windows

하둡 설치파일 압축해제

압축 프로그램을 관리자 권한으로 실행합니다.

[Run as administrator]

다운받은 압축파일을 압축해제합니다.

[풀기]

CodeLab 폴더 선택 >> [확인]

환경변수 추가하기

환경변수 새로 만들기

변수 이름	HADOOP_HOME
변수 값	C:\CodeLab\hadoop-3.1.3

PATH에 경로 추가하기

변수 이름	PATH
변수 값	%HADOOP_HOME%\bin

정상 설치 확인하기

hadoop -version

C:\CodeLab>hadoop -version

java version "1.8.0_65"

Java(TM) SE Runtime Environment (build 1.8.0_65-b17)

Java HotSpot(TM) 64-Bit Server VM (build 25.65-b01, mixed mode)

C:\CodeLab>

HDFS configurations

hadoop-env.cmd

hadoop-env.cmd을 오픈합니다.

C:\CodeLab\hadoop-3.1.3\etc\hadoop

4개의 라인을 가장 아래에 추가합니다.

set HADOOP_PREFIX=%HADOOP_HOME%

set HADOOP_CONF_DIR=%HADOOP_PREFIX%\etc\hadoop

set YARN_CONF_DIR=%HADOOP_CONF_DIR%

set PATH=%PATH%;%HADOOP_PREFIX%\bin

core-site.xml

core-site.xml을 오픈합니다.

C:\CodeLab\hadoop-3.1.3\etc\hadoop

property 태그를 추가해 줍니다.

<name>fs.default.name</name>

</property>

</configuration>

data 폴더 생성

C:\CodeLab\hadoop-3.1.3 아래에 data 폴더를 생성합니다.

C:\CodeLab\hadoop-3.1.3

C:\CodeLab\hadoop-3.1.3\data안에 "namenode" 폴더와 "datanode" 폴더를 생성합니다.

C:\CodeLab\hadoop-3.1.3\data

hdfs-site.xml

hdfs-site.xml을 오픈합니다.

C:\CodeLab\hadoop-3.1.3\etc\hadoop

<name>dfs.replication</name>

</property>

<value>file:///C:/CodeLab/hadoop-3.1.3/data/namenode</value>

</property>

<value>file:///C:/CodeLab/hadoop-3.1.3/data/datanode</value>

</property>

</configuration>

namespace, logs and data files 이 저장됩니다.

YARN configurations

mapred-site.xml

mapred-site.xml파일을 오픈합니다.

<name>mapreduce.framework.name</name>

</property>

<name>mapreduce.jobtracker.address</name>

<value>local</value>

</property>

</configuration>

yarn-site.xml

yarn-site.xml파일을 오픈합니다.

C:\CodeLab\hadoop-3.1.3\etc\hadoop

<name>yarn.server.resourcemanager.address</name>

</property>

<name>yarn.server.resourcemanager.application.expiry.interval</name>

</property>

<name>yarn.server.nodemanager.address</name>

</property>

<name>yarn.nodemanager.aux-services</name>

<value>mapreduce_shuffle</value>

</property>

<name>yarn.nodemanager.aux-services.mapreduce.shuffle.class</name>

<value>org.apache.hadoop.mapred.ShuffleHandler</value>

</property>

<name>yarn.server.nodemanager.remote-app-log-dir</name>

</property>

<name>yarn.nodemanager.log-dirs</name>

<value>/dep/logs/userlogs</value>

</property>

<name>yarn.server.mapreduce-appmanager.attempt-listener.bindAddress</name>

</property>

<name>yarn.server.mapreduce-appmanager.client-service.bindAddress</name>

</property>

<name>yarn.log-aggregation-enable</name>

</property>

<name>yarn.log-aggregation.retain-seconds</name>

</property>

<name>yarn.application.classpath</name>

<value>%HADOOP_CONF_DIR%,%HADOOP_COMMON_HOME%/share/hadoop/common/*,%HADOOP_COMMON_HOME%/share/hadoop/common/lib/*,%HADOOP_HDFS_HOME%/share/hadoop/hdfs/*,%HADOOP_HDFS_HOME%/share/hadoop/hdfs/lib/*,%HADOOP_MAPRED_HOME%/share/hadoop/mapreduce/*,%HADOOP_MAPRED_HOME%/share/hadoop/mapreduce/lib/*,%HADOOP_YARN_HOME%/share/hadoop/yarn/*,%HADOOP_YARN_HOME%/share/hadoop/yarn/lib/*</value>

</property>

</configuration>

Initialize environment variables

환경변수를 설정해주는 hadoop-env.cmd 파일이 있는 위치로 이동합니다.

C:\CodeLab\hadoop-3.1.3\etc\hadoop

C:\CodeLab>cd C:\CodeLab\hadoop-3.1.3\etc\hadoop

C:\CodeLab\hadoop-3.1.3\etc\hadoop>

C:\CodeLab\hadoop-3.1.3\etc\hadoop>dir *.cmd

Volume in drive C has no label.

Volume Serial Number is CEC6-6B66

Directory of C:\CodeLab\hadoop-3.1.3\etc\hadoop

10/27/2019 08:14 PM 4,154 hadoop-env.cmd

09/12/2019 01:11 PM 951 mapred-env.cmd

09/12/2019 01:06 PM 2,250 yarn-env.cmd

3 File(s) 7,355 bytes

0 Dir(s) 147,772,735,488 bytes free

C:\CodeLab\hadoop-3.1.3\etc\hadoop>

C:\CodeLab\hadoop-3.1.3\etc\hadoop>hadoop-env.cmd

C:\CodeLab\hadoop-3.1.3\etc\hadoop>

Format file system 설정

C:\CodeLab\hadoop-3.1.3\etc\hadoop>hadoop namenode -format

DEPRECATED: Use of this script to execute hdfs command is deprecated.

Instead use the hdfs command for it.

2019-10-27 20:46:46,750 WARN util.Shell: Did not find winutils.exe: {}

java.io.FileNotFoundException: Could not locate Hadoop executable: C:\CodeLab\hadoop-3.1.3\bin\winutils.exe -see https://wiki.apache.org/hadoop/WindowsProblems

at org.apache.hadoop.util.Shell.getQualifiedBinInner(Shell.java:620)

at org.apache.hadoop.util.Shell.getQualifiedBin(Shell.java:593)

at org.apache.hadoop.util.Shell.<clinit>(Shell.java:690)

at org.apache.hadoop.util.StringUtils.<clinit>(StringUtils.java:78)

at org.apache.hadoop.hdfs.server.common.HdfsServerConstants$RollingUpgradeStartupOption.getAllOptionString(HdfsServerConstants.java:127)

at org.apache.hadoop.hdfs.server.namenode.NameNode.<clinit>(NameNode.java:324)

2019-10-27 20:46:46,996 INFO namenode.NameNode: STARTUP_MSG:

/************************************************************

STARTUP_MSG: Starting NameNode

STARTUP_MSG: host = CODEMASTER/xxx.xxx.xxx.xxx

STARTUP_MSG: args = [-format]

STARTUP_MSG: version = 3.1.3

STARTUP_MSG: classpath = C:\CodeLab\hadoop-3.1.3\etc\hadoop;C:\CodeLab\hadoop-3.1.3\share\hadoop\common;C:\CodeLab\hadoop-3.1.3\share\hadoop\common\lib\accessors-smart-1.2.jar;C:\CodeLab\hadoop-3.1.3\share\hadoop\common\lib\animal-sniffer-annotations-1.17.jar;C:\CodeLab\hadoop-3.1.3\share\hadoop\common\lib\asm-5.0.4.jar;C:\CodeLab\hadoop-3.1.3\share\hadoop\common\lib\audience-annotations-0.5.0.jar;C:\CodeLab\hadoop-3.1.3\share\hadoop\common\lib\avro-1.7

... 생략

STARTUP_MSG: build = https://gitbox.apache.org/repos/asf/hadoop.git -r ba631c436b806728f8ec2f54ab1e289526c90579; compiled by 'ztang' on 2019-09-12T02:47Z

STARTUP_MSG: java = 1.8.0_65

************************************************************/

2019-10-27 20:46:47,347 INFO namenode.NameNode: createNameNode [-format]

2019-10-27 20:46:47,779 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

Formatting using clusterid: CID-2a188cb9-4f77-4c04-ba4c-1307eb61d1d5

2019-10-27 20:46:50,687 INFO namenode.FSEditLog: Edit logging is async:true

2019-10-27 20:46:51,052 INFO namenode.FSNamesystem: KeyProvider: null

2019-10-27 20:46:51,054 INFO namenode.FSNamesystem: fsLock is fair: true

2019-10-27 20:46:51,056 INFO namenode.FSNamesystem: Detailed lock hold time metrics enabled: false

2019-10-27 20:46:51,158 INFO namenode.FSNamesystem: fsOwner = codedragon (auth:SIMPLE)

2019-10-27 20:46:51,159 INFO namenode.FSNamesystem: supergroup = supergroup

2019-10-27 20:46:51,160 INFO namenode.FSNamesystem: isPermissionEnabled = true

2019-10-27 20:46:51,164 INFO namenode.FSNamesystem: HA Enabled: false

2019-10-27 20:46:51,236 INFO common.Util: dfs.datanode.fileio.profiling.sampling.percentage set to 0. Disabling file IO profiling

2019-10-27 20:46:51,311 INFO blockmanagement.DatanodeManager: dfs.block.invalidate.limit: configured=1000, counted=60, effected=1000

2019-10-27 20:46:51,311 INFO blockmanagement.DatanodeManager: dfs.namenode.datanode.registration.ip-hostname-check=true

2019-10-27 20:46:51,322 INFO blockmanagement.BlockManager: dfs.namenode.startup.delay.block.deletion.sec is set to 000:00:00:00.000

2019-10-27 20:46:51,323 INFO blockmanagement.BlockManager: The block deletion will start around 2019 Oct 27 20:46:51

2019-10-27 20:46:51,340 INFO util.GSet: Computing capacity for map BlocksMap

2019-10-27 20:46:51,340 INFO util.GSet: VM type = 64-bit

2019-10-27 20:46:51,362 INFO util.GSet: 2.0% max memory 889 MB = 17.8 MB

2019-10-27 20:46:51,362 INFO util.GSet: capacity = 2^21 = 2097152 entries

2019-10-27 20:46:51,385 INFO blockmanagement.BlockManager: dfs.block.access.token.enable = false

2019-10-27 20:46:51,394 INFO Configuration.deprecation: No unit for dfs.namenode.safemode.extension(30000) assuming MILLISECONDS

2019-10-27 20:46:51,394 INFO blockmanagement.BlockManagerSafeMode: dfs.namenode.safemode.threshold-pct = 0.9990000128746033

2019-10-27 20:46:51,394 INFO blockmanagement.BlockManagerSafeMode: dfs.namenode.safemode.min.datanodes = 0

2019-10-27 20:46:51,395 INFO blockmanagement.BlockManagerSafeMode: dfs.namenode.safemode.extension = 30000

2019-10-27 20:46:51,396 INFO blockmanagement.BlockManager: defaultReplication = 1

2019-10-27 20:46:51,397 INFO blockmanagement.BlockManager: maxReplication = 512

2019-10-27 20:46:51,397 INFO blockmanagement.BlockManager: minReplication = 1

2019-10-27 20:46:51,397 INFO blockmanagement.BlockManager: maxReplicationStreams = 2

2019-10-27 20:46:51,398 INFO blockmanagement.BlockManager: redundancyRecheckInterval = 3000ms

2019-10-27 20:46:51,398 INFO blockmanagement.BlockManager: encryptDataTransfer = false

2019-10-27 20:46:51,398 INFO blockmanagement.BlockManager: maxNumBlocksToLog = 1000

2019-10-27 20:46:51,457 INFO namenode.FSDirectory: GLOBAL serial map: bits=24 maxEntries=16777215

2019-10-27 20:46:51,497 INFO util.GSet: Computing capacity for map INodeMap

2019-10-27 20:46:51,497 INFO util.GSet: VM type = 64-bit

2019-10-27 20:46:51,498 INFO util.GSet: 1.0% max memory 889 MB = 8.9 MB

2019-10-27 20:46:51,499 INFO util.GSet: capacity = 2^20 = 1048576 entries

2019-10-27 20:46:51,501 INFO namenode.FSDirectory: ACLs enabled? false

2019-10-27 20:46:51,501 INFO namenode.FSDirectory: POSIX ACL inheritance enabled? true

2019-10-27 20:46:51,502 INFO namenode.FSDirectory: XAttrs enabled? true

2019-10-27 20:46:51,503 INFO namenode.NameNode: Caching file names occurring more than 10 times

2019-10-27 20:46:51,512 INFO snapshot.SnapshotManager: Loaded config captureOpenFiles: false, skipCaptureAccessTimeOnlyChange: false, snapshotDiffAllowSnapRootDescendant: true, maxSnapshotLimit: 65536

2019-10-27 20:46:51,515 INFO snapshot.SnapshotManager: SkipList is disabled

2019-10-27 20:46:51,542 INFO util.GSet: Computing capacity for map cachedBlocks

2019-10-27 20:46:51,542 INFO util.GSet: VM type = 64-bit

2019-10-27 20:46:51,543 INFO util.GSet: 0.25% max memory 889 MB = 2.2 MB

2019-10-27 20:46:51,544 INFO util.GSet: capacity = 2^18 = 262144 entries

2019-10-27 20:46:51,559 INFO metrics.TopMetrics: NNTop conf: dfs.namenode.top.window.num.buckets = 10

2019-10-27 20:46:51,559 INFO metrics.TopMetrics: NNTop conf: dfs.namenode.top.num.users = 10

2019-10-27 20:46:51,560 INFO metrics.TopMetrics: NNTop conf: dfs.namenode.top.windows.minutes = 1,5,25

2019-10-27 20:46:51,564 INFO namenode.FSNamesystem: Retry cache on namenode is enabled

2019-10-27 20:46:51,564 INFO namenode.FSNamesystem: Retry cache will use 0.03 of total heap and retry cache entry expiry time is 600000 millis

2019-10-27 20:46:51,567 INFO util.GSet: Computing capacity for map NameNodeRetryCache

2019-10-27 20:46:51,567 INFO util.GSet: VM type = 64-bit

2019-10-27 20:46:51,567 INFO util.GSet: 0.029999999329447746% max memory 889 MB = 273.1 KB

2019-10-27 20:46:51,567 INFO util.GSet: capacity = 2^15 = 32768 entries

2019-10-27 20:46:51,639 INFO namenode.FSImage: Allocated new BlockPoolId: BP-2118333937-xxx.xxx.xxx.xxx-1572176811632

2019-10-27 20:46:51,752 INFO common.Storage: Storage directory C:\CodeLab\hadoop-3.1.3\data\namenode has been successfully formatted.

2019-10-27 20:46:51,838 INFO namenode.FSImageFormatProtobuf: Saving image file C:\CodeLab\hadoop-3.1.3\data\namenode\current\fsimage.ckpt_0000000000000000000 using no compression

2019-10-27 20:46:51,993 INFO namenode.FSImageFormatProtobuf: Image file C:\CodeLab\hadoop-3.1.3\data\namenode\current\fsimage.ckpt_0000000000000000000 of size 394 bytes saved in 0 seconds .

2019-10-27 20:46:52,190 INFO namenode.NNStorageRetentionManager: Going to retain 1 images with txid >= 0

2019-10-27 20:46:52,230 INFO namenode.FSImage: FSImageSaver clean checkpoint: txid = 0 when meet shutdown.

2019-10-27 20:46:52,230 INFO namenode.NameNode: SHUTDOWN_MSG:

/************************************************************

SHUTDOWN_MSG: Shutting down NameNode at CODEMASTER/xxx.xxx.xxx.xxx

************************************************************/

C:\CodeLab\hadoop-3.1.3\etc\hadoop>

HDFS configurations 을 기반으로한 경로가 보여집니다. (Bold처리)

Start HDFS daemons

C:\CodeLab\hadoop-3.1.3\etc\hadoop>%HADOOP_HOME%\sbin\start-dfs.cmd

C:\CodeLab\hadoop-3.1.3\etc\hadoop>

두개의 명령어 창이 오픈됩니다. 각 각 namenode 과 datanode를 위한 것입니다.

[Allow access]

Start YARN daemons

%HADOOP_HOME%\sbin\start-all.cmd

C:\CodeLab\hadoop-3.1.3\etc\hadoop>%HADOOP_HOME%\sbin\start-all.cmd

This script is Deprecated. Instead use start-dfs.cmd and start-yarn.cmd

starting yarn daemons

C:\CodeLab\hadoop-3.1.3\etc\hadoop>

4개가 구동됩니다.

Hadoop Namenode

Hadoop datanode

YARN Resourc Manager

YARN Node Manager

Resource manager 오픈

YRAN 웹사이트를 통해 job status 를 볼 수 있습니다.

http://localhost:8088

설정 파일 다운로드

hadoop-configurations.zip

저작자표시비영리

'Development > Java' 카테고리의 다른 글

WEKA API documentation (0)	2019.11.10
WEKA - arff Dataset (0)	2019.11.10
Hadoop - install for windows (설치 및 설정하기) (0)	2019.11.10
오버라이딩(Overriding) vs 오버로딩(Overloading) (0)	2019.11.07
오버라이딩(Overriding), 재정의된 멤버 함수의 호출 순서, 오버라이딩 사용 이유 (0)	2019.11.07
상속(Inheritance), 상속의 목적, 클래스의 상속(Inheritance), 상속관계 용어 정리 (동일 용어) (0)	2019.11.06

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.07 11:16

오버라이딩(Overriding) vs 오버로딩(Overloading) Development/Java

오버라이딩(Overriding) vs 오버로딩(Overloading)

구분	오버라이딩(Overriding)	오버로딩(Overloading)
의미	재정의	다중 정의 ≒ 중복 정의
적용	상속관계	특정 클래스
설명	부모 클래스에 있던 상속받은 멤버 함수를 다시 정의하는 것	같은 이름의 멤버 함수를 여러 개 정의하는 것
접근제한	· super클래스의 메소드보다 sub클래스의 메소드 접근제한이 동일하거나 더 넓어야 합니다. ·	상관없음
리턴형	기본적으로 같아야 합니다.	상관없음
메소드명	super클래스의 메소드명과 sub클래스의 메소드명이 같아야 합니다.	반드시 같아야 합니다.
인자 (타입, 개수)	반드시 같아야 합니다.	반드시 달라야 합니다.
개념	상속받은 기존의 메소드를 재정의하는 것	새로운 메소드를 정의하는 것
함수	speedUp()	speedDown(int) speedDown(double)

'Development > Java' 카테고리의 다른 글

WEKA - arff Dataset (0)	2019.11.10
Hadoop - install for windows (설치 및 설정하기) (0)	2019.11.10
오버라이딩(Overriding) vs 오버로딩(Overloading) (0)	2019.11.07
오버라이딩(Overriding), 재정의된 멤버 함수의 호출 순서, 오버라이딩 사용 이유 (0)	2019.11.07
상속(Inheritance), 상속의 목적, 클래스의 상속(Inheritance), 상속관계 용어 정리 (동일 용어) (0)	2019.11.06
Step by Step - CSM Bayesian Networks (0)	2019.11.04

Trackback (0) : Comment (0)

Posted by codedragon codedragon

댓글을 달아 주세요

2019.11.07 09:02

오버라이딩(Overriding), 재정의된 멤버 함수의 호출 순서, 오버라이딩 사용 이유 Development/Java

오버라이딩(Overriding)

· 오버라이딩은 메서드 재정의라고도 불리며 이는 서로 상속관계로 이루어진 객체들간의 관계에서 비롯됩니다.

· Inherited methods can be overridden; instance variables cannot be overridden (although they can be redefined in the subclass, but that’s not the same thing, and there’s almost never a need to do it.

· super클래스가 가지고 있는 메서드를 sub클래스에서 똑 같은 것을 새로 만들게 되면 더 이상 super클래스에 있는 이름이 같은 메서드로 호출할 수 없게 됩니다. 이를 오버라이딩 또는 멤버 은폐라고도 합니다.

· 다시 정리하면, 상위 클래스에 정의된 메소드의 이름, 반환형, 매개변수 선언까지 완전히 동일한 메소드를 하위 클래스에서 다시 정의하는 것으로 하위 클래스에 정의된 메소드에 의해 상위 클래스의 메소드는 가리워집니다.

· When a method is overridden in a subclass, and that method is invoked on an instance of the subclass, the overridden version of the method is called. (The lowest one wins.)

· Overriding just means that a subclass redefines one of its inherited methods when it needs to change or extend the behavior of that method.

재정의된 멤버 함수의 호출 순서

Phoenix p;

p.sleep(); // Animal의 sleep() 호출

p.sound(); // Bird의 sound() 호출

p.move(); // Phoenix의 move() 호출

오버라이딩 사용 이유

재사용성

'Development > Java' 카테고리의 다른 글

Hadoop - install for windows (설치 및 설정하기) (0)	2019.11.10
오버라이딩(Overriding) vs 오버로딩(Overloading) (0)	2019.11.07
오버라이딩(Overriding), 재정의된 멤버 함수의 호출 순서, 오버라이딩 사용 이유 (0)	2019.11.07
상속(Inheritance), 상속의 목적, 클래스의 상속(Inheritance), 상속관계 용어 정리 (동일 용어) (0)	2019.11.06
Step by Step - CSM Bayesian Networks (0)	2019.11.04
WEKA(웨카) 설치하기 - install - 3.8.3 (0)	2019.11.03

Trackback (0) : Comment (0)

Posted by codedragon codedragon

달력

'Development/Java'에 해당되는 글 768건

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

WEKA - arff Dataset

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

'Development > Java' 카테고리의 다른 글

TRACKBACK |

댓글을 달아 주세요

카테고리

공지사항

글 보관함

링크