본문 바로가기

분류 전체보기71

제1강 빅데이터 분석을 위한 기초 - 람다함수 람다 아키텍쳐란 람다 아키텍쳐는 트위터에서 스트리밍 컴퓨팅에 있었던Nathan Marz에 의해서 소개된 아키텍쳐로, 실시간 분석을 지원하는 빅데이타 아키텍쳐이다. 아키텍쳐에 대한 자세한 내용은 http://lambda-architecture.net/ 에 소개되어 있다. Lambda 함수를 만드는 시점에 서비스가 코드를 실행할 때 AWS Lambda가 호출할 수 있는 코드의 함수인 핸들러를 지정합니다. 빅데이타 빅데이터 인공지능 SSL 해킹 1. 시스템에 입력되는 모든 데이터 는 처리를 위해 배치 레이어와 속도 레이어 모두에 전달됩니다. 2. 배치 층 (I)의 마스터 세트 (불변, 추가 전용 원시 데이터 세트), 및 (ii) 사전 계산하도록 배치 인원 관리 두 가지 기능을 갖는다. 3. 계층에 속한 사람들.. 2018. 11. 9.
클라우드구축 (ETC 1) -OpenStack 메모리부족시 해결방법 디스크가 부족할때 디스크 추가하는법 클라우드로 사용자에게 서비스 하려고 디스크, 메모리 크기를 작게 설정했을경우, SWAP을 이용해 할당 해줄수있다. 빅데이타 빅데이터 인공지능 SSL 해킹 Swap 파티션/파일 Swap이란? 시스템에서 모든 프로그램은 메모리에서 동작한다. 즉, 사용자가 새로운 프로그램을 실행하거나 기존의 프로그램을 사용하여 뭔가를 작업을 할 때 현재 메모리의 사용 가능한 공간보다 많은 메모리를 필요로 할 때가 있다. 이 때 부족한 만큼의 메모리 공간을 확보하기 위해 메모리에서 우선순위가 낮은 프로세스가 사용하는 메모리의 내용을 Swap 영역으로 옮기고 새로운 프로그램이나 기존의 프로그램에 추가적인 메모리를 할당한다. 실습방법 1. 가상머신 (VM ware) 디스크 추가를 해준다. 2-1.. 2018. 11. 9.
(수정중...) 메인 노드 이외의 _ 멀티노드 컴퓨트 설치까지 멀티노드 - 컴퓨트 설치부분 빅데이타 빅데이터 인공지능 SSL 해킹 앞부분의 기본구성은 컨트롤러랑 설치가 같으니 추가해줄예정 (2) 컴퓨트 노드(각각 설정) [0] 네트워크 및 호스트네임 설정 네트워크 설정하시면 됩니다. 사용자 생성 sudo passwd root//루트 사용자 패스워드 설정 su - root//루트로 로그인 useradd -U -G sudo -s /bin/bash -m stack echo "stack ALL=(ALL) NOPASSWD:ALL" >> /etc/sudoers passwd stack dkagh1. dkagh1. 호스트 네임 설정 vi /etc/hostname compute1 재부팅 [1] 컨트롤러 노드에서 컴퓨트 노드로 SSH 접속 가능하게 설정(패스워드 없이) mkdir ~.. 2018. 11. 9.
정보보안 (2) - 정보관리 정보보호 관리 빅데이타 빅데이터 인공지능 SSL 해킹 1) 정보보호 관리 체계 (1) ISMS [1] ISMS란? 기업이 정보보호 활동을 지속적, 체계적으로 수행하기 위해 필요한 보호 조치를 체계적으로 구축하였는지를 점검 [2] 정보보호 관리 과정 1] 정보보호 정책 수립 및 범위 설정 2] 경영진 책임 및 조직 구성 3] 위험 관리 4] 정보보호 대책 구현 5] 사후관리 (2) PIMS [1] PIMS란? 기업이 개인정보보호 활동을 지속적, 체계적으로 수행하기 위해 필요한 보호 조치를 체계적으로 구축하였는지를 점검 (3) PIPL [1] PIPL 공공 기관과 민간 기업이 일정 기준 이상의 개인정보보호 수준을 갖추면 정부가 이를 인증해 주고 외부에 공개 가능 현재는 PIMS와 흡수통합되었음 2) 위험 관.. 2018. 11. 8.