본문 바로가기
728x90

전체 글247

주소 변환 프로토콜(ARP) ARP: IP 주소를 알고 있을 때 네트워크 상에서 MAC 주소를 얻어온다 -> 2-3 계층 중간에서 동작 1. ARP 캐시 테이블 참고 2-1. 있으면 유니캐스트 통신 2-2. 없으면 ARP Request 패킷 - 브로드캐스트로 전송 Reply 패킷 - 유니캐스트로 통신 주소 변환 인터넷의 주소 논리 주소(logical address) 호스트나 라우터가 사용하는 네트워크 레벨 주소 전세계적으로 유일한 주소 IP 주소 32비트 길이 물리 주소(physical address) 로컬 네트워크에서 유효한 주소 로컬 주소, 로컬에서 유일하면 됨 보통 하드웨어로 구현 호스트나 라우터 내에 설치된 NIC에 들어 있음 MAC 주소 호스트나 라우터로 패킷을 전달하기 위해 논리 및 물리 주소가 모두 필요 논리 주소 물리.. 2024. 3. 29.
근거리 통신망: 유선 이더넷 양 끝의 양단은 항상 이더넷 Internet 라우터에서 사용하는 프로토콜: NAT, RIP, OSPF End-User 밑의 프로토콜은 Server Farm에서도 사용됨 통신 과정 예시 End-User: PC(A와 B의 통신), 스위치, DNS 서버 같은 네트워크의 IP 10.10.10.1 ~ 10.10.10.255 PC A의 IP 10.10.10.100 PC B의 IP 10.10.10.101 DNS 서버의 IP 10.10.10.200 인터넷과 연결된 게이트웨이 10.10.10.1 가장 처음에 ARP 프로토콜이 동작 IEEE 표준 이더넷 근거리 통신망(LAN; Local Area Network) LAN들은 대부분 광역통신망(WAN)이나 인터넷에 연결 CSMA/CD: 유선 환경에서 충돌을 탐지하는 매커니즘 .. 2024. 3. 29.
자연어처리 task 자연어처리 모델의 학습 방법 트랜스퍼 러닝(Transfer Learning): 특정 태스크를 학습한 모델을 다른 태스크 수행에 재사용하는 기법 특징 기존보다 모델의 학습 속도가 빨라짐 새로운 태스크를 더 잘 수행 업스트림(Upstream) 태스크 모델이 대규모의 코퍼스를 가지고 문맥을 고려하면서 태스크 수행 대표적인 업스트림 태스크 다음 단어 맞히기 빈칸 채우기(BERT-Masked Language Model) GPT 계열 모델 다운스트림(Downstream) 태스크 자연어처리의 구체적인 태스크 성능을 올리기 위해 (업스트림 태스크로 Pre-training) 다운스트림 태스크의 본질은 Classification 자연어를 입력받아 해당 입력이 어떤 범주에 해당하는지 확률 형태로 반환 문서분류, 자연어추론,.. 2024. 3. 27.
선형 회귀를 이용한 예측과 그 응용 1. 상관계수와 상관분석의 기초 두 변량의 상관관계는? 상관계수 Pearson Correlation Coefficient 두 변수 사이에 존재하는 선형적인 상관관계를 수치로 나타낸 것 크기는 -1 ~ +1으로, 값이 0일 경우 상관관계가 없는 것임 부호가 (+)이면 양의 상관관계, 부호가 (-)이면 음의 상관관계를 의미 DataFrame 내에서의 상관계수 도출 english.csv : TOEIC, TEPS, TOEFL의 점수 파일 import pandas as pd df = pd.read_csv('english.csv') df_corr = df.corr(method = 'pearson') df_corr 주어진 데이터 중 결측치가 부분적으로 존재할 때 pandas는 어떻게 상관계수를 계산? 해당 데이터 쌍.. 2024. 3. 25.
탐색적 데이터 분석(EDA)과 데이터 시각화 1. 공공데이터 품질 관리와 오류율 데이터 품질 지표(DQI) 일관성: 데이터 품질 오류율의 표준 오류율과 직결된 세부 지표: 속성 / 표준 / 중복값 / 연계값 개체의 속성이 표준을 준수하고 있으며 중복되지는 않는가? 데이터 연계에 있어서 일관성이 유지되고 있는가? 완전성: 데이터 품질 오류율의 구조 오류율과 직결된 세부 지표: 논리 모델 / 식별자 / 물리구조 / 속성의미 데이터베이스 구축에 있어 논리적 설계와 물리적 구조가 올바르게 구축되었는가? 정확성: 데이터 품질 오류율의 값 오류율과 직결된 세부 지표: 입력값 / 업무규칙 / 범위, 형식 / 참조관계 / 계산식 데이터가 유효한 범위 및 형식으로 구성되어 있는가? 준비성 데이터 품질 관리 정책 및 지침이 기관에 맞게끔 잘 정의되어 있는가? 경영자.. 2024. 3. 24.
네트워크의 구성요소 네트워크의 구성 공유기 -> ISP(인터넷 서비스 제공업체 ex. SKT, KT, U+ 등) 단말기를 통해 공유기로 접속 왼쪽 영역을 LAN, 오른쪽 영역을 WAN 구간이라고 함 네크워크 구성 요소 단말기(노트북, 컴퓨터)와 네트워크 서비스를 제공하는 프로그램 접속 장치(스위치, 라우터, 허브) L2 스위치: 한 네트워크 내부에서 데이터 전송을 수행하는 장치로 네트워크 입구 - 데이터 링크 계층(MAC 주소) 허브: 연결된 단말기 수만큼 속도가 1/N된다는 문제로 스위치가 등장 여러 개의 단말기에서 동시에 데이터를 전송할 때 충돌이 발생 Collision Domain: 충돌이 발생할 수 있는 범위 Broadcast Domain: 한 단말기에서 네트워크 내의 모든 단말기와 통신하고자 할 때 도달할 수 있는.. 2024. 3. 22.

티스토리툴바