기록장 기록장

LLM 이해하기LLM이란방대한 양의 텍스트 데이터를 학습하여 인간의 언어를 이해하고 생성할 수 있는 인공지능 모델NLP부터 이해하기자연어를 컴퓨터가 이해할 수 있도록 처리하는 인공지능의 한 분야자연어의 경우 시계열 데이터이기 때문에, RNN, LSTM등의 모델로 자연어 처리에 도전할 수 있다.감성 분석, 워드 클라우드 만들기로 자연어 전처리를 연습해보자단어 임베딩단어를 벡터(vector) 형태로 표현하는 방법자연어 처리에서 컴퓨터가 텍스트를 이해하고 처리할 수 있도록 단어를 숫자들의 배열로 변환하는 과정으로, 현대에는 원 핫 인코딩같은 희소 벡터를 사용하는 대신 밀집 벡터를 사용한다.또, 자연어에는 비슷한 뜻을 가지거나 서로 연관이 높은 단어들이 존재함 → 유사한 의미를 가진 단어들은 벡터 공간에서 가까..

✍️이번주 회고전체 회고7월의 시작이다! 이 달에는 시험이 무려 두 개나 있다... 하나는 JLPT와 정보처리기사... 설마 정처기를 이때 바로 볼 줄 알았으면 JLPT 신청을 4월에 하지 않았을텐데... 그래도 이미 신청한 시험은 신청한 것... ^^;; 두 마리 토끼를 놓칠까봐 너무 무섭지만 남는 쉬는 시간마다 짬짬이 공부하고 있다. 학부생 시절 이후로 이렇게 공부해본 게 오랜만인지...이번 주 부터는 본격적인 딥러닝 이론에 대해서 배우고, CNN 모델을 사용해보았다. CNN 모델은 이미지 분석에서 가장 많이 사용되는 모델이고, 실제로 실험을 적용해보았을 때 DNN보다 훨씬 높은 정확도를 높이는 것을 확인했다. 정확도가 5에폭만에 무려 90퍼센트라니~커널 필터라는 간단한 연산이 들어가는 것만으로도 성..

✍️이번주 회고전체 회고어느덧 6월이 다 지나가고 6월 마지막주다. 이번주부터 상당히 바빠질 예정인데, 정보처리 기사 시험이 바로 7월에 있다... 맙소사...! 한 개도 공부를 안 한 것 같은데... ㅠㅠ... 그래도 한 번 시험에 도전하는 것을 의의로 두고 최선을 다해 도전해야겠다. 분명히 필기할 때 본 게 분명한데 적으려고 하니 적히지 않는 이유는 무엇일까? 서술형이란게 참 그렇다... Keep드디어 딥러닝 모델의 구현을 시작했다! 학부 시절 사용한 MNIST 데이터셋이 참 반갑다... ^_^ pytorch로 모델을 하나하나 구현해 가는 과정은 좀 지루하긴 한데(아무래도 전부 한 줄 한줄 구현하는 거다보니까?), 그래도 이런 코드 한 줄 한 줄이 모여서 컴퓨터가 손글씨를 인식할 수 있게 된다니 신기..

✍️이번주 회고전체 회고이번주는 병원 등으로 학원을 너~ 무 자주 빠져서 조금 아쉬운 한 주가 되고 말았다...ㅠ-ㅠ 컨디션 관리도 실력이라는 사실을 새삼 깨닫게 되었는데, 남은 여름 건강관리에 힘써서 Keep머신 러닝의 경우 이전부터 관심있는 분야였다! 눈이 반짝반짝해져서 즐겁게 들을 수 있었던 것 같다.노트 작성 방식을 개선했다. 코드를 길게 작성하기보다는 탄탄한 개념이 중요한 부분이라, 필기도 개념 위주로 바꾸게 되었는데 꽤 만족스러운 것 같다.실습에서 만나는 데이터들도 익숙한 데이터들이 많다! 머신 러닝 파트는 수월하고 즐겁게 보낼 수 있을 것 같다.이번주는 정보처리기사 스터디도 평소보다 원할한 분위기에서 진행됐다. 여러번 해보고 나서야 어느정도 감이 잡힌다니... C언어의 포인터와 배열에 대한 ..

솔직 회고6/9 - 6/10 이틀간의 단위 프로젝트를 끝마쳤다!... 이 짧은 시간동안 내가 웹사이트를 다 만들다니... 감회가 너무 새롭다. 그리고 Streamlit에 이렇게 숨겨진 기능이 많았다니... 심지어 아직 덜 파헤친 것 같다. 새로운 것들을 너무너무 많이 얻어갈 수 있는, 좋은 경험을 했다. 우리 팀은 4팀으로, 중고차 시세 조회 및 FAQ 조회가 가능한 웹 사이트를 구현하였다.링크 : https://github.com/SKNETWORKS-FAMILY-AICAMP/SKN15-1st-4TEAM/tree/main 나는 4팀에서 DB 연동, Streamlit 구현을 주로 담당했다. 사실, 고백하자면 나는 DB 관리를 이번에 처음해봤다. SQL문은 사용해본 적이 있지만... ERD를 그리는 법, 어..

KLTKeep웹 크롤링은 잘 도전해보지 않은 영역이었는데, 이번주 동안 다른 페이지를 접근하는 방식으로 두 개 이상의 페이지를 크롤링 하는 방법을 익힐 수 있었다.Lacked실습 위주의 강의를 듣다보니 이론 위주의 수업을 필기할 때에 비해 필기 내용이 다소 부정확해지는 면이 있는 것 같다. 이 코드들은 다 나중에도 사용할 테니까 코드에 주석을 좀 더 꼼꼼하게 다는 연습도 필요할 것 같다.페이지를 넘기는 부분을 구현하는 것이 너무 어렵다... Selenium은 좀 더 쉬운 API인데도...! 그리고 DB와 연결할 때 자꾸 오류가 발생하는데 이 이 유를 꼭 한 번 확인해봐야겠다.Try도움 없이 지역 코드를 활용하여 전국 데이터를 가져오는 방법을 익혔다. 웹 크롤링에 점점 익숙해지고 개발자 도구를 통해 웹의 ..

requets 라이브러리- 파이썬용 HTTP 라이브러리. 다양한 HTTP 요청을 보낼 수 있으며 API가 간단하다.- 다음은 멜론 사이트에 requests 라이브러리를 통해 접근하는 코드이다.import requests #인터넷 접속을 위한 패키지url = "https://www.melon.com/song/detail.htm?songId=37139110"head = {'user-agent' : 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/136.0.0.0 Safari/537.36 Edg/136.0.0.0'}r = requests.get(url, headers=head)print(r.text)..

✍️이번주 회고전체 회고월요일부터 앓고 있던 종기가 터져... 상당히 불안불안한 일주일이었다. 피곤하지만 수업 동안에는 최대한 정신 차리고 강의를 정리하려고 애썼다. 수업 중에 노션을 활용해서 수업 내용, 내가 배운 코드를 정리해 두면 이렇게 블로그에 회고록을 올릴 때 도움이 되는 것 같기도 해서 계속해서 노션 정리는 하게 될 것 같다.Keep기존 코드를 기반으로 응용해서 새로운 함수를 만들 수 있을 정도의 기반이 생겼다.드디어 환경 세팅에서 문제가 생기지 않는다. 이제 편하게 노트북을 껐다 켤 수 있다 ^-^)b수업 도중 학습 내용을 좀 더 깔끔하게 정리하는 것이 가능해졌다. 마크다운 언어에도 확실히 익숙해졌다.Problem아직 배우지 않은 새로운 알고리즘을 떠올리는 게 너무 어렵다. 알고리즘에 익숙해..