티스토리

진진진 개발일지

검색하기

블로그 홈

진진진 개발일지

jinjinjincode.tistory.com/m

진진리 님의 블로그입니다.

구독자: 0

방명록 방문하기

728x90

주요 글 목록

[고대로] static 변수와 영속성 컨텍스트 https://jinjinjincode.tistory.com/313 [고대로] 운영 시간 관리Devkor에서 '고대로'라는 학교 안내 어플을 개발하는 활동을 하고 있다.학교의 건물, 강의실, 편의시설 등의 운영시간을 관리할 필요성이 생겨 해당 기능을 맡아 구현하였다. 프로젝트를 시작하jinjinjincode.tistory.com 운영 시간 관리를 구현하면서 영속성 컨텍스트 때문에 운영 시간 변동이 제대로 반영되지 않았던 오류가 발생하였다. 문제 상황기능 구현 이후에 DB를 확인하던 중 운영하고 있는 시간임에도 건물의 isOperating이 false임을 발견하였다. 우선 해당 건물이 운영 중이라고 판단하는 로직에 오류가 발생해 false로 값이 저장되었나 싶어서 log.info로 확인해보았는데 스케줄러가.. 공감수 0 댓글수 0 2024. 8. 17.
[고대로] 운영 시간 관리 Devkor에서 '고대로'라는 학교 안내 어플을 개발하는 활동을 하고 있다.학교의 건물, 강의실, 편의시설 등의 운영시간을 관리할 필요성이 생겨 해당 기능을 맡아 구현하였다. 프로젝트를 시작하면서 학교 시설을 건물, 강의실, 편의시설로 구별하였다.초반에 구상한 내용인데, 지금 생각해보면 강의실과 편의시설을 따로 구분할 필요성이 없지 않았을까라는 생각이 들기도 한다. 아무튼 건물과 강의실, 건물과 편의시설은 일대다 연관관계를 맺고 있으며 강의실과 편의시설은 건물과 독립된 운영시간을 가지고 있다.가장 처음에는 각 시설에 operatingTime을 "00:00-00:00"과 같은 형식으로 저장하여 해당 String을 가지고 운영 여부 true/false를 판단하면 되지 않을까?라고 생각했다. 문제 상황그러나 .. 공감수 0 댓글수 0 2024. 8. 17.
AWS IAM 계정으로 배포하기 (1) 학교 동아리(Devkor)로부터 AWS IAM 계정을 받았다.해당 계정을 통해 현재 이용 가능한 것은 EC2, RDS, S3이다.현재 내 계정으로 돌아가고 있는 EC2와 RDS를 옮기고 CI/CD를 구축하고자 한다. 1. 환경변수 수정일단 application.yml의 환경변수를 수정해준다. DB 정보 관련인텔리제이에 RDS의 정보를 입력하여 연결해준다. 할당 받은 RDS에 database가 없어서 만들어준다.연결한 RDS의 콘솔창을 연 후 다음과 같이 입력하여 실행한다.create database kodaero; 위 인텔리제이 창에 있는 URL에 /kodaero를 추가해서 application.yml의 DB_URL에 저장해준다.username과 password도 수정한다. 그 외 기존 나의 ec2 ip.. 공감수 0 댓글수 0 2024. 6. 27.
NAT Network Address TranslationNAT주소 변환 기술공인 IP 부족 현상을 완화하기 위해 제안intranet에서 공용 네트워크에 접근하기 위해 네트워크를 연결하는 Router에서 사설 IP를 공인 IP로 변환시켜 내보냄사설 IP 대역10.0.0.0 ~ 10.255.255.255 -> 10.0.0.0/8172.16.0.0 ~ 172.31.255.255 -> 172.16.0.0/12192.168.0.0 ~ 192.168.255.255 -> 192.18.0.0/16NAT 사용 목적IPv4 부족 현상 완화공인 IP 사용 비용 감소보안 NAT 동작 과정 NAT 종류Static NAT사설 IP : 공인 IP가 1 : 1Dynamic NAT사설 IP: 공인 IP가 n : m동시에 통신가능한 장비가 공.. 공감수 0 댓글수 0 2024. 6. 7.
Routing RoutingRouting최적의 경로를 설정하여 목적지까지 전송하는 일련의 과정최적의 경로 학습하여 Routing Table에 기록 -> 경로 학습Routing을 위해 필요한 정보목적지 네트워크입/출력 인터페이스 정보가능성 있는 모든 경로 정보최적의 경로지속적인 경로 정보 유지Routing table최적으로 결정된 경로 정보를 저장하는 공간 C: 바로 연결되어 있는 네크워크R: RIP 프로토콜로 받은 정보O: OSPF 프로토콜로 받은 정보 Static & Dinamic Routing의 특징Static Routing관리자가 경로 정보를 직접 설정네트워크 변화에 대해 관리자가 직접 관리 -> 실시간 관리가 어려움Dynamic Routing장비 스스로 자신의 정보를 다른 장비와 교환하여 경로 정보를 학습하는 .. 공감수 0 댓글수 0 2024. 6. 7.
거대 언어 모델과 프롬프트 엔지니어링 1. 거대 언어 모델의 등장과 혁신트랜스포머 등장부터 GPT-4까지Google 트랜스포머 이후 불과 7년, GPT-4o에 이르기까지 급속도의 발전이 이루어짐2019 GPT-22021 GPT-32023 GPT-4LLM, 과업 수행의 양상을 바꾸다서로 다른 과업을 수행하려면 개별 과업에 특화된 데이터셋 확보 후 과업에 맞는 모델을 구축해야 했음GPT를 비롯한 거대 언어 모델의 등장단일한 모델로 여러 과업을 해결 가능범용 인공지능 AGI의 가능성 대두, 연구와 산업 전반에서의 큰 변화트랜스포머 기반 언어이해모델 BERT, GPT 등트랜스포머의 병렬처리 특징으로 인해 가능교육에서 산업까지 LLM의 파급력과제 수행 등 교육의 모든 과정에서 LLM 활용 가능성이 위협으로 변모AI & ChatGPT Guidance .. 공감수 0 댓글수 1 2024. 6. 4.
WWW와 HTTP 구조WWW는 분산 클라이언트/서버 서비스브라우저를 사용하는 클라이언트가 서버를 이용하여 서비스를 제공제공되는 서비스는 사이트라는 여러 장소에 분산각 사이트는 웹 페이지라는 하나 이상의 문서를 관리각 웹 페이지는 동일한 사이트 또는 다른 사이트에 있는 웹 페이지들에 대한 링크를 포함하이퍼미디어와 하이퍼텍스트하이퍼텍스트: 다른 문서를 참조하여 문서를 생성텍스트 일부가 다른 문서의 링크로 정의하이퍼미디어: 다른 문자 문서나 사진, 비디오, 소리 등을 포함하는 문서의 링크를 갖는 문서웹 클라이언트브라우저는 제어기(controller), 클라이언트 프로토콜, 해석기(interpreter)로 구성웹 서버URLHTTP는 자원 위치지정자라는 개념을 사용인터넷에서 모든 종류의 정보를 지정할 수 있는 표준'프로토콜;//호.. 공감수 0 댓글수 0 2024. 5. 31.
TCP TCP 서비스프로세스-대-프로세스 통신End-to-End포트 번호를 이용한 프로세스간 통신 제공 스트림 배달 서비스스트림 기반 프로토콜두 개의 프로세스가 가상의 튜브로 연결바이트 스트림 형태로 데이터 송수신송신 버퍼와 수신 버퍼: 송수신이 동일한 속도로 이루어지지 않을 때 필요세그먼트(segment): 일련의 바이트를 패킷으로 그룹화 -> IP 계층에 전달 전이중 통신양방향 전송송신 데이터와 수신 데이터에 대한 확인 응답을 함께 보내는 piggybacking송신측은 다중화, 수신측은 역다중화 수행다중화와 역다중화송신측은 다중화, 수신측은 역다중화 수행연결형 서비스TCP는 연결지향 프로토콜물리적 연결이 아닌 가상의 연결요청 -> 승인 -> 데이터 교환 -> 해제 순신뢰성 서비스확인응답 메커니즘 이용TCP .. 공감수 0 댓글수 0 2024. 5. 31.
데이터 거버넌스와 데이터과학의 미래 1. 대한민국 데이터 정책 거버넌스데이터 거버넌스데이터 거버넌스데이터의 생성, 변경, 처리 등에 관하여 정의된 표준데이터 거버넌스르 통해 조직 내에 존재하는 데이터의 품질을 제고하고 데이터와 관련한 보안을 강화할 수 있음데이터 정책 거버넌스데이터 정책을 담당하는 주요 부처 및 부서의 기능을 조정하여 데이터 정책의 목표를 달성해나가는 추진 체계를 일컫는 말넓은 의미에서는 관련 법률과 종합계획까지 포괄 공공데이터의 컨트롤 타워행정안전부 디지털정부혁신실디지털정부정책국정부혁신국공공데이터국공공서비스국공공데이터정책과공공데이터관리과통합데이터분석센터디지털정부혁신실 주요 업무온라인 기반의 효율적인 디지털 정부 구현 및 디지털 정부 국제 협력 확대국민의 삶과 밀접히 연관되어 있는 공공데이터의 개방과 이용 활성화모바일 전자.. 공감수 0 댓글수 0 2024. 5. 27.
UDP 사용자 데이터 그램 형식8바이트 고정 크기 헤더발신지 포트 번호목적지 포트 번호길이: 헤더와 데이터를 합한 전체 길이검사합: 오류 탐지 UDP 서비스프로세스 대 프로세스 통신(종단간 통신): IP 주소와 포트번호로 구성된 소켓 이용비연결형 서비스: 각 사용자 데이터그램은 독립적흐름 제어: X오류 제어: 검사합만 존재혼잡 제어: X -> 실시간 트래픽을 전송비연결형 서비스: 각 사용자 데이터그램은 독립적흐름 제어: X오류 제어: 검사합만 존재혼잡 제어: X -> 실시간 트래픽을 전송큐잉(Queueing): 프로세스가 시작될 때 포트번호를 요청. 입/출력 큐 생성. 프로세스 종료 시 큐 제거다중화와 역다중화: 송신측 - 다대일 관계, 다중화. 수신측 - 일대다 관계, 역다중화 UDP가 적합한 서비스: DNS.. 공감수 0 댓글수 0 2024. 5. 24.
DNS 도메인 이름 시스템(DNS, Domain Name Service)DNS의 필요성도메인 이름과 IP주소를 매핑컴퓨터는 통신할 때 숫자인 IP 주소를 처리사람들은 IP 주소보다 사용하기 편리한 이름을 사용함DNS 변환 과정사용자는 호스트 이름을 파일 전송 클라이언트에게 전달파일 전송 클라이언트는 호스트 이름을 DNS 클라이언트에 전달부팅 시 알게된 DNS 서버의 IP주소를 이용하여 파일 서버의 도메인 이름을 조회(query)DNS 서버는 파일 서버의 IP 주소를 응답DNS 클라이언트는 IP 주소를 파일 전송 클라이언트에게 전달파일 전송 클라이언트는 수신한 IP 주소로 파일 서버에 접속이름 공간계층적 이름 공간을 가지기 위해 도메인 이름 공간을 만들어야 함트리는 0에서 127까지의 128개 레이블(label).. 공감수 0 댓글수 0 2024. 5. 24.
ICMP 인터넷 제어 메시지 프로토콜(ICMP)IP 프로토콜의 문제점신뢰성이 없고 비연결형 데이터그램 전달오류 제어(오류 보고 및 오류 수정) 기능이 없음호스트와 관리 질의를 위한 메커니즘이 없음네트워크 관리자는 다른 호스트나 라우터로부터 정보를 획득할 필요가 있음2가지 유형의 메시지오류-보고(error-reporting) 메시지: 라우터나 목적지 호스트가 IP 패킷을 처리하는 도중 발견하는 문제 보고질의(query) 메시지: 호스트나 네트워크 관리자가 라우터나 다른 호스트로부터 특정 정보 획득 시 사용 (ping 등)ICMP 메시지 형식오류 보고 메시지오류 수정이 아닌 보고만 함오류 수정은 상위 계층 프로토콜(TCP)에 맡김오류 메시지는 언제나 최초의 발신지로 전송ICMP 오류 메시지 중요한 사항오류 메시지를 .. 공감수 0 댓글수 0 2024. 5. 17.
IP 스푸핑 IP 스푸핑(spoofing)해커가 자신의 IP주소를 악용하고자 하는 호스트의 IP 주소로 변조ACL 통제를 회피할 수 있는 공격 방법ACL(Access Control List)접근 통제 방법. 네트워크 방화벽을 통한 트래픽 필터링 방법.라우터를 통과하는 패킷을 필터링하는 목록으로 네트워크에 대한 접근을 허용 또는 거부하는 기능변조된 IP를 사용하기 때문에 추적이 어려움TCP/IP 구조적 결함을 이용한 공격 방법 - 인증 방법의 부재공격자를 신뢰 관계에 있는 호스트(관리자)인 것처럼 속임신뢰 관계: 특정 시스템의 IP와 신뢰 관계를 맺고(서버에 등록) 로그인 없이 접속을 허락하는 것 공격방법서버와 클라이언트 B(관리자)는 신뢰 관계를 맺고 있음(ACL)클라이언트 A(공격자)가 서버에 접근하고자 함(3-w.. 공감수 0 댓글수 0 2024. 5. 17.
연관규칙 생성과 연관분석의 실제 1. 지표를 이용한 연관규칙의 분석연관분석의 지표Support(지지도): 이걸 본 사람이 얼마나 많을까?support(A): A가 등장하는 트랜잭션의 비율support(A -> B): A와 B가 모두 등장하는 트랜잭션의 비율Confidence(신뢰도): 이걸 본 사람은 저것도 봤을까?confidence(A -> B): A가 등장하는 트랜잭션 중, B까지 등장하는 비율confidence(A -> B) = support(A->B) / support(A)높은 confidence를 갖는 연관규칙을 반드시 유의미하다고 볼 수 있나?lift(향상도)lift(A -> B) = confidence(A -> B) / support(B)support(B)가 높아 confidence(A -> B) 값이 높아지는 것을 방지l.. 공감수 0 댓글수 0 2024. 5. 13.
군집화 알고리즘과 군집에 대한 평가 1. K-평균 군집화와 퍼지 군집화K-Means Clustering사전에 군집의 개수 K를 결정각 군집에는 중심이 존재하게 되는데, 중심과 군집 내 데이터 거리 차의 제곱 합을 최소로 하는 최적 군집을 찾음일단 중심 K개를 찍고 반복Python에서의 K-평균 군집화# 알고리즘 수행을 위해 필요한 라이브러리import matplotlib.pyplot as pltimport pandas as pdfrom sklearn.cluster import KMeansplt.figure(figsize = (10, 5))# K-means Clustering의 실제df = pd.read_csv('menu.csv', engine = 'python')df_data = df[['가격', '판매량']] # 군집화하기 위해 사용할 .. 공감수 0 댓글수 0 2024. 5. 13.
알람 기능 구현 방법 이번 학기 캡스톤으로 공유형 가계부 웹 서비스를 구현하는 프로젝트를 진행하고 있다.가계부에 초대받았을 경우, 포인트를 받았을 경우, 댓글이 달렸을 경우 등 서비스 이용자에게 알람을 줄 필요성이 생겨 알람 기능을 구현하고자 한다.그 전에 알람 기능을 구현하는 방법에는 어떤 방법이 있고 어떤 장단점이 있는지 알아보았다. HTTP 통신에서는 클라이언트의 요청이 있을 경우에 서버가 응답을 하는 방식이고 비연결성이라는 특징을 가지고 있기 때문에 서버에서 실시간으로 클라이언트에 변경사항을 알리기 어렵다.이에 대한 해결책, 즉 서버의 Event를 클라이언트로 보내는 방법으로 Polling, Long polling, Web socket, SSE 등이 있다.Polling일정 주기를 가지고 서버에 요청을 보내는 방식HTT.. 공감수 0 댓글수 0 2024. 5. 5.
여러 가지 방법을 이용한 분류 1. k-최근접 이웃에 기반한 분류k-Nearest Neighbor(k-최근접 이웃, k-NN)가장 가까운 이웃 k개를 바탕으로 분류를 수행하는 방법데이터가 주어질 때마다 연산을 통한 분류가 이루어지므로, 엄밀하게는 학습이라고 하기 어려움 Python에서의 k-NN# 필수 라이브러리 불러오기import pandas as pdfrom sklearn.neighbors import KNeighborsClassifierfrom sklearn.model_selection import train_test_splitfrom sklearn.metrics import confusion_matrix# 지뢰와 보물 데이터 불러오기df = pd.read_csv('treasure.csv')# 주어진 데이터에서 입력 변수와 예측.. 공감수 0 댓글수 0 2024. 4. 29.
인터넷 프로토콜(IP) 인터넷 프로토콜(IP)TCP/IP 프로토콜이 사용하는 전송 메커니즘TCP: 신뢰성 있음네트워크 계층(3계층) 프로토콜비신뢰성(Unreliable), 최선의 노력 전달 서비스데이터그램이 목적지에 성공적으로 도달한다는 것을 보장하지 않음비연결성(Connectionless): 전달되는 데이터그램에 대해 상태 정보 유지하지 않음데이터그램 방법을 사용하는 패킷 교환망(인터넷망)을 위해 설계된 비연결형 프로토콜 -> for 라우팅(최적 경로 설정)네트워크에서 전송될 수 있는 최대 크기가 1500bytes(MTU, 최대 전송 단위 - 이더넷의 경우)로 정해져 있으므로 패킷을 쪼개서 보냄(단편화)데이터그램IP 계층의 패킷가변 길이 패킷으로 헤더와 데이터(페이로드) 부분으로 구성헤더는 20~60 바이트라우팅에 필요한 정.. 공감수 0 댓글수 0 2024. 4. 19.
DHCP Spoofing DHCP 스푸핑DHCP: 네트워크 상에 동적으로 IP 정보를 할당하여 사용자에게 편의를 제공하기 위한 프로토콜서버로부터 IP 주소, IP 만료 기한, subnet netmask, gateway, dns 서버를 자동으로 할당받는 서비스UDP로 동작하므로 인증이 불가능UDP 자체가 비신뢰성/비연결지향성 프로토콜이기 때문에 인증된 DHCP인지 판별 불가능DHCP 스푸핑: DHCP 프로토콜이 제공하는 정보를 변조해 타깃 PC를 속이는 공격 방법실제 IP 할당을 하기 전에 공격자가 할당공격자는 타깃 PC를 대상으로 ARP 스푸핑을 통해 스니핑(Sniffing)을 해야 함정상적인 DHCP 동작 과정DHCP 패킷의 동작 순서: DISCOVER - OFFER - REQUEST - ACK.. 공감수 0 댓글수 0 2024. 4. 19.
언어 모델(Language Model): 통계적 언어 모델 언어 모델(Language Model, LM) 언어를 이루는 구성 요소(글자, 형태소, 단어, 단어열 혹은 문장, 문단 등)를 문맥으로 하여 이를 바탕으로 다음 구성 요소를 예측하거나 생성하는 모델 예시: 자동완성, 문장생성, 대화시스템, 음성인식, 기계번역, 문서요약 통계적 언어 모델(Statistical Language Model, SLM) 딥러닝 언어 모델(Deep Neural Network Lanuage Model, DNN LM) 통계적 언어 모델 주어진 문서(코퍼스) 내 단어열(혹은 문장)의 등장 확률을 기반으로 각 단어의 조합을 예측하는 전통적인 언어 모델 실제로 많이 사용하는 단어열(문장)의 확률 분포를 정확하게 근사하는 것이 모델의 목표 조건부 확률과 언어 모델 조건부 확률 P(B|A): .. 공감수 0 댓글수 0 2024. 4. 12.
ARP Spoofing(ARP Cache Poisoning) ARP Spoofing ARP 캐시 테이블(동적인 IP와 MAC)이 공격 대상(정보 변경이 목적) 공격자가 지속적으로 ARP 응답을 보냄으로써 캐시 테이블을 변조 시키는 것 공격자는 MAC 주소를 위장해야 하므로 같은 네트워크에 위치해야 함 Alice가 Bob의 정보를 얻음 192.168.10.7 / BB:BB:BB:BB:BB:BB (정상적인 정보) 동적으로 저장되었다면 시간이 지나면 삭제되는 것을 허용 공격자는 정상적인 ARP Cache를 가지고 있음 step 1. Alice에게 요청 패킷을 받으면 공격자는 가상 reply 패킷 응답을 192.168.10.7 / CC:CC:CC:CC:CC:CC로 전송 동일하게 Bob에게도 192.168.10.5 / CC:CC:CC:CC:CC:CC으로 전송 Bob은 아무.. 공감수 0 댓글수 1 2024. 4. 12.
개인정보 비식별화와 데이터 윤리 1. 가명 정보와 데이터 비식별화 국내법에 따른 정보의 분류 개인 정보: 주소, 휴대 전화 번호 등 특정 개인에 관한 정보 사전에 구체적 동의를 받아 제한된 범위에서 활용 가능 가명 정보: 추가 정보가 주어지지 않으면 개인을 알아볼 수 없는 정보 연구, 통계 작성 등에 한해 동의 없이 활용 가능 추가 정보: 암호화 당시 쓰인 키, 가명 처리 시 활용된 매핑 테이블, 가명 처리 알고리즘의 파라미터 등 익명 정보: 추가 정보가 주어져도 개인을 전혀 알아볼 수 없는 정보 활용 목적에 무관하게 자유로이 활용 가능 개인정보보호법의 적용 대상이 아님 데이터를 더 가치 있게, 비식별화 데이터 비식별화(De-Identification, Anonymization) 데이터 내에 개인 식별이 가능한 정보가 존재하는 경우, .. 공감수 0 댓글수 0 2024. 4. 8.
동적 호스트 설정 프로토콜(DHCP) PC가 DHCP에 IP 주소를 요청하면서 물리 주소를 보냄(RARP 동작, 브로드캐스트) DHCP는 IP주소를 할당하고 MAC 주소와 IP 주소를 매핑하는 정보를 저장(일정 기간 동안에는 동일한 IP 주소를 할당) TCP/IP에 접속하는 모든 컴퓨터가 알아야 하는 정보(DHCP가 제공하는 정보) 구성 파일에 저장되어 부팅 과정에 접근 컴퓨터의 IP 주소 컴퓨터의 해당 서브넷 마스크 라우터의 IP 주소 DNS의 IP 주소 이전 프로토콜 RARP(Reverse Address Resolution Protocol) 물리 주소 -> IP 주소 나의 MAC 주소를 가지고 나의 IP 주소를 알고자 함 *ARP: 목적지의 IP를 알고 있을 때 MAC을 알고자 함 BOOTP(Bootstrap Protocol) DHCP의.. 공감수 0 댓글수 1 2024. 4. 5.
의사결정나무를 이용한 분류와 예측 1. 정규화와 회귀에 대한 평가 선형 회귀 식, 데이터에 얼마나 걸맞나 R^2 (R-squared, 결정계수) 종속 변수의 변동 중 몇 퍼센트만큼을 이 회귀 모형이 설명할 수 있는가? 독립 변수를 더 다양하게 투입할 수록 값이 늘어나는 경향을 띔 관계가 없는 속성을 독립변수로 추가할 때에도 R^2 값이 증가 adjusted R^2 (adjusted R-squared, 수정된 결정계수) N: validation set의 데이터 개수, p: 독립 변수의 개수 독립 변수의 개수가 많아져도, 무작정 R^2이 증가하지 않음 성능 지표 계산을 위한 라이브러리 # 성능 지표 계산을 위해 필요한 라이브러리 불러오기 from sklearn.metrics import r2_score # 결정계수 from sklearn.m.. 공감수 0 댓글수 1 2024. 4. 1.
주소 변환 프로토콜(ARP) ARP: IP 주소를 알고 있을 때 네트워크 상에서 MAC 주소를 얻어온다 -> 2-3 계층 중간에서 동작 1. ARP 캐시 테이블 참고 2-1. 있으면 유니캐스트 통신 2-2. 없으면 ARP Request 패킷 - 브로드캐스트로 전송 Reply 패킷 - 유니캐스트로 통신 주소 변환 인터넷의 주소 논리 주소(logical address) 호스트나 라우터가 사용하는 네트워크 레벨 주소 전세계적으로 유일한 주소 IP 주소 32비트 길이 물리 주소(physical address) 로컬 네트워크에서 유효한 주소 로컬 주소, 로컬에서 유일하면 됨 보통 하드웨어로 구현 호스트나 라우터 내에 설치된 NIC에 들어 있음 MAC 주소 호스트나 라우터로 패킷을 전달하기 위해 논리 및 물리 주소가 모두 필요 논리 주소 물리.. 공감수 0 댓글수 1 2024. 3. 29.
근거리 통신망: 유선 이더넷 양 끝의 양단은 항상 이더넷 Internet 라우터에서 사용하는 프로토콜: NAT, RIP, OSPF End-User 밑의 프로토콜은 Server Farm에서도 사용됨 통신 과정 예시 End-User: PC(A와 B의 통신), 스위치, DNS 서버 같은 네트워크의 IP 10.10.10.1 ~ 10.10.10.255 PC A의 IP 10.10.10.100 PC B의 IP 10.10.10.101 DNS 서버의 IP 10.10.10.200 인터넷과 연결된 게이트웨이 10.10.10.1 가장 처음에 ARP 프로토콜이 동작 IEEE 표준 이더넷 근거리 통신망(LAN; Local Area Network) LAN들은 대부분 광역통신망(WAN)이나 인터넷에 연결 CSMA/CD: 유선 환경에서 충돌을 탐지하는 매커니즘 .. 공감수 0 댓글수 0 2024. 3. 29.
자연어처리 task 자연어처리 모델의 학습 방법 트랜스퍼 러닝(Transfer Learning): 특정 태스크를 학습한 모델을 다른 태스크 수행에 재사용하는 기법 특징 기존보다 모델의 학습 속도가 빨라짐 새로운 태스크를 더 잘 수행 업스트림(Upstream) 태스크 모델이 대규모의 코퍼스를 가지고 문맥을 고려하면서 태스크 수행 대표적인 업스트림 태스크 다음 단어 맞히기 빈칸 채우기(BERT-Masked Language Model) GPT 계열 모델 다운스트림(Downstream) 태스크 자연어처리의 구체적인 태스크 성능을 올리기 위해 (업스트림 태스크로 Pre-training) 다운스트림 태스크의 본질은 Classification 자연어를 입력받아 해당 입력이 어떤 범주에 해당하는지 확률 형태로 반환 문서분류, 자연어추론,.. 공감수 0 댓글수 0 2024. 3. 27.
선형 회귀를 이용한 예측과 그 응용 1. 상관계수와 상관분석의 기초 두 변량의 상관관계는? 상관계수 Pearson Correlation Coefficient 두 변수 사이에 존재하는 선형적인 상관관계를 수치로 나타낸 것 크기는 -1 ~ +1으로, 값이 0일 경우 상관관계가 없는 것임 부호가 (+)이면 양의 상관관계, 부호가 (-)이면 음의 상관관계를 의미 DataFrame 내에서의 상관계수 도출 english.csv : TOEIC, TEPS, TOEFL의 점수 파일 import pandas as pd df = pd.read_csv('english.csv') df_corr = df.corr(method = 'pearson') df_corr 주어진 데이터 중 결측치가 부분적으로 존재할 때 pandas는 어떻게 상관계수를 계산? 해당 데이터 쌍.. 공감수 0 댓글수 0 2024. 3. 25.
탐색적 데이터 분석(EDA)과 데이터 시각화 1. 공공데이터 품질 관리와 오류율 데이터 품질 지표(DQI) 일관성: 데이터 품질 오류율의 표준 오류율과 직결된 세부 지표: 속성 / 표준 / 중복값 / 연계값 개체의 속성이 표준을 준수하고 있으며 중복되지는 않는가? 데이터 연계에 있어서 일관성이 유지되고 있는가? 완전성: 데이터 품질 오류율의 구조 오류율과 직결된 세부 지표: 논리 모델 / 식별자 / 물리구조 / 속성의미 데이터베이스 구축에 있어 논리적 설계와 물리적 구조가 올바르게 구축되었는가? 정확성: 데이터 품질 오류율의 값 오류율과 직결된 세부 지표: 입력값 / 업무규칙 / 범위, 형식 / 참조관계 / 계산식 데이터가 유효한 범위 및 형식으로 구성되어 있는가? 준비성 데이터 품질 관리 정책 및 지침이 기관에 맞게끔 잘 정의되어 있는가? 경영자.. 공감수 0 댓글수 1 2024. 3. 24.
네트워크의 구성요소 네트워크의 구성 공유기 -> ISP(인터넷 서비스 제공업체 ex. SKT, KT, U+ 등) 단말기를 통해 공유기로 접속 왼쪽 영역을 LAN, 오른쪽 영역을 WAN 구간이라고 함 네크워크 구성 요소 단말기(노트북, 컴퓨터)와 네트워크 서비스를 제공하는 프로그램 접속 장치(스위치, 라우터, 허브) L2 스위치: 한 네트워크 내부에서 데이터 전송을 수행하는 장치로 네트워크 입구 - 데이터 링크 계층(MAC 주소) 허브: 연결된 단말기 수만큼 속도가 1/N된다는 문제로 스위치가 등장 여러 개의 단말기에서 동시에 데이터를 전송할 때 충돌이 발생 Collision Domain: 충돌이 발생할 수 있는 범위 Broadcast Domain: 한 단말기에서 네트워크 내의 모든 단말기와 통신하고자 할 때 도달할 수 있는.. 공감수 0 댓글수 0 2024. 3. 22.

문의안내

티스토리
로그인
고객센터

티스토리는 카카오에서 사랑을 담아 만듭니다.