개발잡부

실행 create 에서 Transformation 선택 탭이 생성된긴 하는데 난 .. 날려먹어서 Input 에 많은 것들이 있지만 Data grid 를 드래그해서 가져온다 가저온 후 클릭 데이터를 입력하고 성적표를 만들었다. 좌측메뉴 플로우에서 Filter rows 를 드래그해서 가져온다 성적표 클릭 shift 드래그 필터에 홉이라고 해야하나 hop 연결 필터를 더블클릭 수학 커트라인으로 이름을 변경한후 "수학점수가 60점 이상" 조건 추가 실행시켜보자 얼레.. 다들 수학을 잘하는 구먼.. Filter rows 를 추가하고 아래의 조건을 입력 수학, 영어 90점 이상 실행시켜보자 True 는 False

Pentaho 란? Pentaho란 빅데이터 분석 및 활용을 위해 데이터 분석, 정제, 이관, 분산 데이터베이스 설계, 구축, 관리 및 보고서 작성등의 기능을 가진 Tool 오픈소스와 엔터프라이즈 버전이 있고 일단 설치해보자 오픈소스 Pentaho PDI 시스템환경 : MacOS 다운로드 https://www.hitachivantara.com/en-us/products/data-management-analytics/pentaho/download-pentaho.html 30일 트라이얼 확인되지 않은 녀석이니 아래 방법으로 설치 하나를 설치했더니 .. 이것들이.. 5개나 생김..

IAM 역할 만들기 API Gateway 생성

Mac OS Big Sur 11.6 설치되어 있나??? mvn -v mvn 설치 Homebrew를 사용한 메이블 설치명령어 brew install maven 에러 case 1 에러 case 2 Error: You are using macOS 10.14. We (and Apple) do not provide support for this old version. 아.. 망할노무 회사야 돈좀 쓰자 OS 업데이트 못하게 했으니.. maven 버전을 낮춰서 설치해봄 repository 버전확인 brew search maven (base) ➜ ~ brew search maven ==> Formulae maven maven-completion maven-shell maven@3.2 maven@3.3 maven@3.5..

/etc/rc.d/rc.local : 부팅작업이 완료된후 마지막에 실행 (runlevel) sudo vi /etc/rc.d/rc.local /home/ec2-user/start.sh 등록 # Please note that you must run 'chmod +x /etc/rc.d/rc.local' to ensure -> 실행권한을 주세요 지발..

아나콘다 설치 후 가상환경 목록확인 conda info --envs 가상환경 생성 conda create --name "doo" python="3.7" shell 껏다 키고 가상환경 실행 conda activate doo 텐서플로우 설치 conda install tensorflow 주피터 노트북 설치 conda install jupyter notebook 주피터 노트북 실행 jupyter notebook 텐서플로 확인 import tensorflow as tf with tf.compat.v1.Session() as sess: hello = tf.constant("Hello") world = tf.constant("World") sentence = hello + world pr = sess.run(sent..

aws sdk 를 사용 파일 업로드 테스트 java 1.8 implementation 'com.amazonaws:aws-java-sdk-s3' package com.etoos.edlfilebatch.service; import com.amazonaws.auth.AWSStaticCredentialsProvider; import com.amazonaws.auth.BasicAWSCredentials; import com.amazonaws.services.s3.AmazonS3; import com.amazonaws.services.s3.AmazonS3ClientBuilder; import com.amazonaws.services.s3.model.PutObjectRequest; import java.io.File..

하나의 버킷에만 풀 권한을 부여 계정과 버킷은 만들었다고 치고 1. 정책생성 IAM > 엑세스 관리 > 정책 우측 상단 [정책생성] 클릭 JSON 텝 선택 { "Version": "2012-10-17", "Statement": [ { "Sid": "ConsoleAccess", "Effect": "Allow", "Action": [ "s3:GetAccountPublicAccessBlock", "s3:GetBucketAcl", "s3:GetBucketLocation", "s3:GetBucketPolicyStatus", "s3:GetBucketPublicAccessBlock", "s3:ListAllMyBuckets" ], "Resource": "*" }, { "Sid": "ListObjectsInBucket"..

Elasticsearch : PUT _component_template/component_template1 { "template": { "mappings": { "properties": { "@timestamp": { "type": "date" } } } } } PUT _component_template/runtime_component_template { "template": { "mappings": { "runtime": { "day_of_week": { "type": "keyword", "script": { "source": "emit(doc['@timestamp'].value.dayOfWeekEnum.getDisplayName(TextStyle.FULL, Locale.ROOT))" } } } } }..

이건 뭐 맨날 할때마다 귀찮아 죽것네 변환 방법은 여러가지가 있지만.. 그중에서 // https://mvnrepository.com/artifact/com.googlecode.json-simple/json-simple implementation group: 'com.googlecode.json-simple', name: 'json-simple', version: '1.1.1' 심플이라고 하니 진짜 심플한지.. 봐야지 디펜던시 추가 build.gradle dependencies { .... // https://mvnrepository.com/artifact/com.googlecode.json-simple/json-simple implementation group: 'com.googlecode.json-si..