본문 바로가기

전체 글 보기

 (105)
1-2회차) 인공지능 자연어 전처리 (한글 자연어 전처리) 한글 자연어 전처리 개요 1. 토큰화 - 영문 자연어 전처리와 비슷 - 한글은 형태소, subword 단위로 토큰화 하는 게 성능이 좋다. 2. 불용어 제거 - 한글 경우에는 스스로 환경에 맞는 불용어를 정의하고 제거하는 방식으로 해야 함. 한글 자연어 전처리 적용 1. 정제 - 특수문자 제거 - 영문과 같은 과정 - 정규식을 이용한 특수문자 제거 - 띄어쓰기가 중요한 한글 1) 띄어쓰기가 적용되지 않은 상태로 코퍼스변환 * 정규식을 이용하여 띄어쓰기가 적용되지 않은 상태로 코퍼스 변환 2) 띄어쓰기 적용을 위한 PyKoSpacing 패키지 설치 * PyPi.org에 등록되지않은 상태이므로 git을 이용한 설치 * 실습하려면 구글 colab을 통해 설치. 3) PyKoSpacing을 이용한 띄어쓰기 적용..
1-1회차) 인공지능 자연어 전처리 (영문 자연어 전처리) 영문 자연어 전처리 개요 1. 정제 - 특수문자 제거 - 대소문자 통일 1) 일반적으로 소문자로 통일 2. 토큰화 - 토큰화에 따라 모델 성능이 차이가 난다. - 불용어 제거 1) 전치사, 관사 등 불필요한 단어를 제거하는 단계 2) you, my, the .. 영문 자연어 전처리 적용 1. 정제 - 제거 대상 특수문자의 종류 - 경우에 따라, 웹사이트에서 제공하는 2byte 특수문자는 여기 없을 수 있음.(주의 필요) - 정규식을 이용한 특수문자 제거(re) 1) \w : 문자, \. : 그 자체, \s : 공백 2) ^ : 제외 3) 문자, .(점), 공백을 제외한 모든 것 길이가 0인 문자로 변환(즉 제거하겠다) 4) \n : 엔터키 눌렀을 때, escape 문자임 5) 이것도 제거함. 2. 토큰화..
혼자 경주 여행하기(카페, 술집, 맛집 추천) 혼자만의 시간을 갖고 싶어서 경주로 여행을 갔다. 계획 세우는 걸 좋아하지만, 계획 없는 여행의 묘미를 느껴본 적이 있어서 이번에도 그렇게 갔다. 라운드투(Round2) - 여자친구 & 친구와 같이 가기 좋은 펍 조용한 동네에 위치한 라운드투(Round2) 펍이다. 들어가면 외국힙합 노래가 나와서 조금은 텐션이 높은 펍이다. 테이블은 3개 정도로 매우 협소한 공간이며, 남자친구(여자친구)와 같이 오면 좋을 것 같다. 펍 사장님(알바생)이 서비스로 칵테일을 주셨다. 기본 맥주를 시켰는데 정말 맛있었다. 그리고 사장님(알바생)이 친절하다. 따로 말을 걸거나 담소를 나누진 않았지만, 잠깐 잠깐 나오는 서비스가 매우 훌륭하다. 맥주와 함께 먹을 감자튀김을 주문했는데 너무 많이 나와서 깜짝 놀랐다. 가격이 2,5..
3-2 부트캠프) 극한의 성질 & 도함수 극한의 성질 1. 상수이며, f(x) & g(x)가 존재 한다는 가정 2. 그림과 같은 성질을 가진다. 연속 1. 다음과 같은 그래프는 불연속한다라고 말한다. 2. 연속한다의 정의는 f(x)가 x = a에서 연속하다. 3. 연속함수는 사칙연산이 가능하다. 4. 8번처럼 연속함수는 lim가 g(x)로 들어가는 게 가능하다. 도함수 1. 도함수는 연속할 때 성립한다. 2. 도함수는 '순간변화율', '미분계수'로 표현 가능하다. 3. 미분가능하다 의미는 연속하다 의미이다. 4. 그림과 같은 경우 미분 불가능 하다. 5. 도함수 : 미분 계수를 결과로 나오는 것. 6. 맨 마지막을 도함수로 구한 예시. 미계도함수 1. 미계도함수 : 도함수를 도함수 하는 것 2. 도함수 표기법.
여수 여행(2박 3일) - 현지인이 추천하는 맛집 좋은 마차 여수가 고향이라서 가끔가는 숨겨진 맛집이다. 하지만 오랜만에 갔는데 내부가 사람으로 많이 있었다. 삼치회를 시키면, 15개 정도 되는 밑반찬을 세팅해준다. 회 상태는 너무 좋아서 술이 절로 들어가니 가보는 걸 추천한다. 위치는 이순신광장에서 차로 5분정도 되는 거리(도보 20분)에 위치했다. 대감게장 사실 나도 처음 들어본 식당이다. 다른 친구 여수 친구 통해서 알게된 식당이었다. 정식을 주문하면, 게장 + 숯불 고기 + 꽃게탕이 나온다. 게장은 최대 리필 1번까지 되는 걸로 알고 있다(정확한 정보는 아닙니다) 일단 중요한 게장이 비리지 않고 맛있다. 또한 꽃게탕 역시 얼큰해서, 전날 마신 술 기운이 싹 사라진다. 여수 밤바다 원래 낭만포차 가려고 했는데, 왜 그런지는 모르겠지만 개장을 하지 ..
3-1 부트캠프) 함수의 극한 함수의 극한 1. 접선의 기울기 구하는 것을 '미분한다' => 미분을 알기 위해선 극한 개념이 필요. 2. x가 2에 가까워 질때, x^2 -x + 2는 4에 가까워 진다. 좌극한 & 우극한 1. 다음과 같이 좌극한, 우극한을 정의한다. 1. 다음과 같은 형태는 무한대, -무한대로 발산한다. 2. 발산은 존재하는 게 아니다. 3. 지수 & 다항 & 로그 함수의 극한 4. 지수 & 다항 & 로그 함수의 무한대로 가는 속도가 다르다.
2-2 부트캠프) 삼각함수 60분법 & 호도법 1. 60분법 : - 한바퀴를 360도로 정의한 각도 단위 - 30도 * 60도 = ? => 이런 개념이 불가능해서, 호도법을 사용 2. 호도법 : rad 사용하며 보통은 표기 하지 않음. 3. 호도법을 사용하면 각도가 숫자로 되어서 계싼이 쉬워짐. sin x & cos x & tan x 1. 데이터 사이언티스트가 삼각함수를 이용할 경우 : 데이터를 받았을 때 삼각함수의 주기성이 보이면 모델링이 가능. 1. 역삼각함수 : 삼각함수를 역함수 시킨 함수. 2. 역함수 정의(앞에서 배운 내용) : 1:1 대응이 되어야 함. 3. 삼각함수는 1:1 대응이 안되기에, 일부를 잘라서, 치역하는 형태를 보임. 1. arcsin x 와 arccos x 와 arctan x 모양 2. 특히 arctan..
2023년도 정부R&D사업 부처합동설명회 개회사(과학기술혁신본부장), 축사 (KISTEP원장) | '23년 정부 R&D예산 주요 특징 설명 2. 국민체감 성과 창출 분야 중 디지털 융합‧혁신을 통해 디지털 대전환(DX) 촉진 1. DX 핵심기술, 산업 DX, 공공 DX 분야 주목할 필요 1. 학생인건비 계상기준 상향 과학기술 분야 1. 해당 사항인가 파악 1. 지원분야 중 인공지능 해당. 1. 초융합 연구 활성화와 소규모의 탐색적 연구 파악. 바이오 부분 1. 인공지능활용혁신신약발굴 & 데이터기반 디지털 바이오 선도사업 파악 ICT 분야
2-1 부트캠프) 지수함수 & 로그함수 지수함수 1. 지수함수 : 기하 급수적으로 변할 때 사용. 오일러 상수 1. 오일러 상수 : 무리수이다. 2. 지수 함수에 (0,1) 접선을 그었을 때, 기울기(m)가 1이 나오는 그 밑은 e(오일러 상수)이다. 시그모이드 함수 1. 시그모이드 함수 : 지수함수 관련해서 알아야 함수이며, 활성화 함수로 활용. 지수 법칙 1. 위에 같은 4가지 지수 법칙이 성립 2. 조건 a,b는 양수이며, x,y는 실수 로그함수 1. 지수함수의 역함수가 로그함수이다. 2. 로그함수 밑이 커지면 x축에 붙는다. 로그법칙 1. 로그법칙은 위와 같다. 2. 밑이 10인 로그 : 상용로그 (고등학교 때 생략했지만, 코딩에서 생략한 건 자연로그이다) 3. 밑이 오일 로그 : 자연로그(log X = ln X) / (코딩에서 밑이 ..
1-2 부트캠프) 합성함수 & 역함수 합성함수 1. 합성함수란 : 서로 다른 함수를 합친 함수 2. 합성함수의 성질 1) 순서가 바뀌면 다른 값을 갖는다. (교환법칙이 성립되지 않음) 2) 연달아 합성할 경우, 순서와 상관 없이 같은 결과를 얻는다. (결합법칙이 성립된다) 3. 다양한 함수를 합성함수로 결합할 수 있다 (log, e, sin 등 다양한 함수들을 합성할 수 있다) 역함수 1. 역함수를 알기 위해선 먼저 일대일 함수 알아야 함. 2.일대일 함수 : 두 함수사이에 정의역과 치역 모두 일대일 대응하는 함수. 3. 일대일 대응 함수 : 두 집합 사이를 중복 없이 모두 일대일로 대응시키는 함수. 1) i.e : 다르게 말하면과 같은 의미(명제의 대우) 4. 역함수 : 두 함수가 일대일 대응함수이면, 출력을 입력이 대응이 되는 것. 5...

티스토리툴바