전체 글 (76) 썸네일형 리스트형 [Day-84] Chap02. [root@server01 ~]# hostname server01.hadoop.com [root@server01 ~]# service cloudera-scm-server-db status pg_ctl: server is running (PID: 1876) /usr/bin/postgres "-D" "/var/lib/cloudera-scm-server-db/data" [root@server01 ~]# ssh server01.hadoop.com root@server01.hadoop.com's password: Last login: Mon Apr 24 09:53:04 2023 from server01.hadoop.com [root@server01 ~]# service cloudera-scm-ser.. [Day-83] 1. vm VirtualBox에서 서버 세 개 가동- login은 하지 않기! 2. MobaXterm에서 CentOS 서버 접속하기* putty 대신 Mobaxterm 사용예정여러 개의 서버 접속 시 보다 간편, 탭 구분 가능 등 사용하기 편리함1) SSH로 접속하기User session- New session 눌러 Server01, Server02, Server03 세 개 만들기 *Server01Remote host: 192.168.101 Session name: Server01 Comments: 192.168.101*Server02Remote host: 192.168.102 Session name: Server01 Comments: 192.168.102*Server03Remote host: 19.. [Day-81] 빅데이터 이해하기/파일럿 프로젝트 chap01. 빅데이터 이해하기 1-1. 빅데이터의 개념 1) 빅데이터의 정의: 6v 크기(Volume): 방대한 양의 데이터(테라, 페타바이트 이상의 크기) 다양성(Variety): 정형(DBMS. 전문 등) + 비정형(SNS. 동영상, 사진, 음성. 텍스트 등) 속도(Wlocity): 실시간으로 생산되며, 빠른 속도로 데이터를 처리/분석 진실성(Veracity): 주요 의사결정을 위해 데이터의 품질과 신뢰성 확보 시각화(Visualzation): 복잡한 대규모 데이터를 시각적으로 표현 가치(Value): 비즈니스 효익을 실현하기 위해 궁극적인 가치를 창출 2) 빅데이터의 목적 - 성공적인 빅데이터 시스템의 구축과 운영을 위해 반드시 갖춰야 할 세 가지 요소: 사람, 기술, 데이터 - 이후 인사이트를 .. [구름 코테 연습] 보호되어 있는 글입니다. [Day-78] 플라스크③ (모델 수정하기) SQLite 데이터베이스는 ORM을 사용할 때 몇 가지 문제점이 있다. 이것은 SQLite 데이터베이스에만 해당하고 PostgreSQL이나 MySQL 등의 다른 데이터베이스와는 상관없는 내용이다. (myproject) C:\projects\myproject>flask db migrate INFO [alembic.runtime.migration] Context impl SQLiteImpl. INFO [alembic.runtime.migration] Will assume non-transactional DDL. INFO [alembic.autogenerate.compare] Detected added column 'question.user_id' INFO [alembic.autogenerate.compare.. [Day-77] 플라스크② (답변 등록 및 파이보 서비스 개발) [Day-76] 플라스크① 개발기초 https://wikidocs.net/book/4542 mkdir md dir => 디렉토리 확인 ls(리눅스에서) dir v* => v로 시작하는 디렉토리 dir /p => 페이지씩 보여줘 dir /s => 서브디렉토리 dir /s/p => 페이지 가상환경 배치파일 만드는 방법 확장자명 .cmd # 메모장 @echo off cd c:/projects/myproject c:/venvs/myproject/scripts/activate 일일이 가상환경 들어가기 귀찮아 환경변수 찾아가는 방법 window r sysdm.cpl 고급에서 시스템 변수의 path 수정 플라스크라는 웹서버를 구동시키겠다 flask run 1장 플라스크 개발준비! # 플라스크 클래스 from flask import Flask #플라스크.. [Day-64] 자연어 처리를 위한 순환신경망 chap07. RNN 순환신경망 단기기억 -> 오래 보존하기 위해 LSTM 상태값을 통해서 쭉 이어지게 cell state 단방향 * 자연어 처리 쪽에서 LSTM은 양방향 LSTM구조 정방향 역방향 계산의 합 -> 훈련속도 느려... 문장에 대한 감정을 분석할 때 자연어 처리를 위한 순환 신경망 시퀀스 정보 학습하는 방법 이 정보를 사용하여 텍스트를 더 잘 이해하는 RNN 1.) 순환구조 모델을 만드는 과정 1. 데이터와 레이블을 제공 2. 모델의 구조를 정의 3. 모델은 데이터를 레이블에 매핑하는 규칙을 학습 이 규칙은 미래 데이터에 대한 레이블을 예측할 수 있는 API로 제공 단, 데이터는 한 번에 처리되기 때문에(p186) 단어사이의 연관관계등 세부화가 일어나지 않으며 데이터 발생순서를 이해하려는 .. 이전 1 2 3 4 5 ··· 10 다음
