Bee's 데이터 과학

파운데이션 모델 foundation model딥러닝 기술의 발전과 더불어, '파운데이션 모델'이라는 (나름) 새로운 개념이 등장하며 주목받고 있습니다. 본 포스트에서는 파운데이션 모델이 무엇인지 자세히 살펴보겠습니다. 파운데이션 모델이란?파운데이션 모델은 엄청난 양의 데이터로 학습된 인공 지능 모델로서 많은 양의 데이터를 통해 일반적인 지식과 패턴을 먼저 흡수한 후, 이를 바탕으로 다양한 분야의 작업을 할 수 있는 모델입니다.   기존 딥러닝 모델을 특정 레시피만 숙지한 요리사라고 생각해 보면 이해가 쉽습니다. 이 요리사는 특정 요리를 만드는 데는 능숙하지만, 다른 요리는 만들 수 없습니다. 반면에 파운데이션 모델은 요리의 기본 원리를 터득한 셰프라고 생각하면 됩니다. 셰프는 다양한 재료와 기법을 활용하..

대학원 공부가 끝나고 나태해지는 나를 위해 쓰는 논문 사이트 모음집! AI/머신러닝/딥러닝 분야에 공부의 끝은 없음으로 꾸준히 새로운 아키텍처와 이슈를 알아주는 게 중요하다 ⭐ 대학원 공부일때 온라인 논문 discussion 과제라도 있어 꾸준히 열심히 읽었는데 졸업하고 나니 손을 놓고 있다. 무리 없이 일주일에 하나씩 읽어보는 게 내 목표이다. 나중에 온라인 논문 읽기 모임 만드는 것도 나의 목표이다. 1.paperswithcode- 논문과 코드를 같이 볼 수 있는 사이트. 분야별 카테고리도 잘 정리되어 있다. 분야별 SOTA 알고리즘도 정리되어 있다. 2.metacurate.io- AI/머신러닝/NLP/CV/데이터 과학 관련 논문/블로그 글 모음집. 뉴스레터, RSS 피드, 트위터에 해시태그 데이터를..

비주얼 스튜디오 코드 Visual Studio Code (줄여서 VS code)는 마이크로소프트에서 개발한 코드를 작성할 수 있는 텍스트 에디터 (text editor)입니다. 비주얼 스튜디오 코드는 자바스크립트, 파이썬, 자바, HTML/CSS 등등 다양한 코드를 작성하는데 적합한 에디터입니다. 개발자/코더로서 많은 시간을 컴퓨터 화면을 보게 되는데 읽기 쉬운 폰트가 꽤나 큰 차이를 가져옵니다. (주피터 노트북에서 웹브라우저 기본 폰트로 열렸다가 가독성이 확 떨어지는 걸 보고 더더욱 폰트의 중요성을 느꼈습니다!) 코딩할 경우 수평 공간이 동일한 Monospace 폰트가 확실히 눈에 편합니다. 아래는 제가 현재 쓰고 있는 vs코드 테마와 폰트입니다. VSCode의 기본 글꼴 Menlo도 나쁘지 않지만 테..

비주얼 스튜디오 코드 Visual Studio Code (줄여서 VS code)는 마이크로소프트에서 개발한 코드를 작성할 수 있는 텍스트 에디터 (text editor)입니다. 비주얼 스튜디오 코드는 자바스크립트, 파이썬, 자바, HTML/CSS 등등 다양한 코드를 작성하는데 적합한 에디터입니다. 🖱️ 비주얼 스튜디오 코드 다운로드 및 설치 방법은 아래 글에서 확인하실 수 있습니다. 비주얼 스튜디어 코드 사용하기 (설치, 한글로 변경) 비주얼 스튜디오 코드 Visual Studio Code (줄여서 VS code)는 마이크로소프트에서 개발한 코드를 작성할 수 있는 텍스트 에디터 (text editor)입니다. 비주얼 스튜디오 코드는 자바스크립트, 파이썬, 자바, benn.tistory.com 비주얼 스튜..

비주얼 스튜디오 코드 Visual Studio Code (줄여서 VS code)는 마이크로소프트에서 개발한 코드를 작성할 수 있는 텍스트 에디터 (text editor)입니다. 비주얼 스튜디오 코드는 자바스크립트, 파이썬, 자바, HTML/CSS 등등 다양한 코드를 작성하는데 적합한 에디터입니다. 이번 글에서는 비주얼 스튜디오 코드를 다운로드하고 설치하는 법을 설명하겠습니다. 다운로드 및 설치 1. 비주얼 스튜디오 코드 홈페이지에 접속하여 "Download for Windows" 클릭하기 또는 드롭다운 메뉴를 클릭해 본인 운영체제에 맞는 설치파일을 다운로드 할수있습니다. 2. 다운로드한 설치파일을 실행하여 를 선택하고 을 클릭합니다. 3. 설치할 폴더를 바꾸려면 를 클릭하여 변경을 하고 를 클릭합니다. ..

SQLite란? SQLite는 MySQL나 PostgreSQL와 같은 데이터베이스 관리 시스템이지만, 서버가 아니라 응용 프로그램에 넣어 사용하는 비교적 가벼운 데이터베이스이다. 참고 : http://ko.wikipedia.org/wiki/SQLite 별도의 설치 필요 없이 파이썬에서는 SQLite 데이터베이스와 연결가능한 sqlite3 내장 모듈이 포함되어 있습니다. 이번 글에서는 sqlite3 모듈의 기본 사용법을 정리해 보겠습니다. sqlite3 사용법 1. SQLite 데이터베이스에 연결하기 sqlite3 모듈을 불러오기 import sqlite3 데이터베이스와 연결하기 위해서 connect() 메서드를 사용합니다. 괄호 안에 연결하고픈 파일 이름을 넣어줍니다. 존재하지 않는 이름을 넣어주면 그 ..

💾 SQLite SQLite는 다른 관계형 데이터베이스 관리 시스템에 비해 비교적 가벼운 편이며 주로 응용 프로그램에 넣어 사용하는 (임베디드) 데이터베이스입니다. 다른 관계형 데이터베이스와 같이 SQL로 쿼리가 가능하며 쉬운 설치 및 속도가 빠른 이유로 SQL 독학용으로 추천합니다. SQLite 공식 사이트에도 데이터 분석 및 교육 목적으로 추천을 하고 있습니다. 🖥 SQLite 설치하기 1. SQLite 다운로드 페이지로 이동 2. 운영체제에 맞는 .zip 파일을 다운로드 3. 원하는 위치에 폴더를 생성한 후 (예제 C:\>sqlite) 압축파일 압축을 푼다. 세 가지 파일 (sqlite3.def, sqlite3.dl, sqlit3.exe)이 있습니다. ▶️ SQLite 실행하기 1. Command ..

이번 글에서는 R에서 데이터 프레임 열 이름을 바꾸는 방법에 대해 소개해보겠습니다. 특히 외부 데이터를 불러올 경우 원하지 않는 형식의 열 이름으로 불러올 경우가 있습니다. 이해하기 쉬운 열 이름으로 바꾸면 더 수월하게 작업할 수 있게 됩니다. 📊 샘플 데이터 프레임 예제로 변수가 3개인 데이터 프레임 df을 생성했습니다. df df v1 v2 v3 1 1 Harry 70 2 2 Ron 50 3 3 Hermione 100 ✏️ colnames() 사용 colnames()를 사용하여 데이터 프레임 df의 변수명을 확인해보겠습니다. > colnames(df) [1] "v1" "v2" "v3" 열 이름을 바꾸기 전에 df2라는 복사본을 만들겠습니다. 이렇게 할 경우 원본 데이터 프레임 df는 변하지 않으며 원..

Tableau 태블로 태블로는 데이터 시각화 전용 플랫폼으로 비즈니스 인텔리전스 (BI) 업계에서 자주 쓰이는 툴이다. 비슷하게 유명한 툴로는 마이크로소프트 파워 BI가 있다. 파이썬이나 R 같은 프로그래밍 언어를 사용할 필요가 없으며 다른 도구에 비해 쉽게 배울 수 있기로 유명하다. 다양한 차트를 사용해 대시보드를 만들어 낼수있다. 태블로 제품 태블로는 클라우드 기반 솔루션인 Tableau Cloud, 데스크탑 용인 Tableau Desktop, 데이터 준비 및 정리를 도와주는 툴 Tableau Prep Builder 등등 다양한 제품을 다양한 요금제로 제공하고 있으니 웹사이트에서 자세한 내용을 확인해보세요. 무료인 Tableau Public https://public.tableau.com/app/di..

모듈 모듈 module은 여러 클래스, 함수, 변수를 가지고 있는 파이썬 파일(.py)입니다. 파이썬에 기본적으로 내장되어 있는 내장 모듈, 다른 사람들이 만든 외부 모듈, 또는 직접 작성한 개인 모듈을 불러와 파일 안에 해당 클래스와 함수를 사용할 수 있습니다. 파이썬에서 제공하는 내장 (built-in) 모듈은 따로 설치가 필요 없이 바로 사용 가능합니다. 아래와 같이 모듈들인 비슷한 기능을 제공합니다. 자주 쓰이는 내장 모듈 몇개: datetime - 날짜와 시간 다루는 기능 e.g. 지금 날짜 출력 time - 시간 관련된 기능 e.g. 프로그램 몇 초간 실행 멈추기, 코드 실행시간 측정하기 math - 수학에 관련된 기능 e.g. 자연로그, 코사인, 사인 등등 random - 랜덤 한 값을 생성..