본문 바로가기

프로그래밍 언어30

웹 크롤링 쉽게 이해하기: 데이터 수집의 기초 웹 크롤링이란? 쉽게 이해해보자인터넷을 사용하다 보면 수많은 웹사이트에서 정보를 얻습니다. 그런데 이렇게 많은 정보를 일일이 손으로 수집하는 것은 매우 힘들겠죠? 웹 크롤링은 이런 문제를 해결해주는 기술입니다. 웹 크롤링은 웹사이트에서 자동으로 데이터를 수집하는 과정으로, 검색 엔진이나 데이터 분석 등에 자주 사용됩니다.크롤러(Crawler)란 무엇인가요?크롤러는 웹사이트를 자동으로 탐색하면서 데이터를 수집하는 프로그램입니다. 예를 들어, 우리가 원하는 정보를 가지고 있는 웹사이트가 있다면, 크롤러는 그 웹사이트의 페이지들을 하나하나 방문해 내용을 가져올 수 있습니다.크롤러는 다음과 같은 순서로 작동합니다:시작점 설정: 크롤링을 시작할 웹사이트의 주소를 설정합니다.웹 페이지 다운로드: 설정한 웹사이트의 .. 2024. 8. 21.
[JSP] MYSQL 연동 DB별 JDBC URL 및 JDBC DricerCalss 더보기 Mssql com.microsoft.sqlserver.jdbc.SQLServerDriver jdbc:sqlserver://IP:1433;DatabaseName=DBNAME Tibero com.tmax.tibero.jdbc.TbDriver jdbc:tibero:thin:@IP:8629:DBNAME DB2 com.ibm.db2.jcc.DB2Driver jdbc:db2://IP:50000/DBNAME cubrid cubrid.jdbc.driver.CUBRIDDriver jdbc:cubrid:IP:33000:DBNAME::: mysql com.mysql.cj.jdbc.Driver jdbc:mysql://IP:3306/DBNAME?characterE.. 2023. 8. 12.
[Error/JAVA] Eclipse와 Github 연동 시, 연속 로그인 나올 때 이클립스에서 깃허브 연동할 때, 로그인 창이 계속 뜨는 이유가 토큰이 만료되서라고 하더라고요. 토근 연장을 해주도록 할게요. Settings를 눌러줍니다. 스크롤을 내려서 Developer settings을 눌러줍니다. Personal access tokens의 Tokens (classic)를 눌러줍니다. 토근명을 작성해주고 유효기간을 선택해준다. ※토큰 생성 후 다시보기는 못하기 때문에 꼭 저장해두기 생성한 토큰 복사한다. User : 아이디 Password : 복사한 토큰 작성 후 Log in을 눌러준다. 행복한 하루 되세요 ☆*: .｡. o(≧▽≦)o .｡.:*☆ 2023. 3. 8.
[ALL] Eclipse와 Github 연동하기 안녕하세요. 오랜만에 공부하려고 앉았습니다. 공부도 하고 잔디도 같이 심으려도 Github 연동하는 법을 알려드릴게요. 1. 리포지토리와 이클립스 연동 깃 저장소(리포지토리)를 하나 만들어 줍니다. 리포지토리에서 경로를 복사하여 이클립스에 붙여넣을 겁니다. 왼쪽 상단에 Open Perspective의 Git을 눌러줍니다. 아까 Github에서 복사해둔 경로는 붙여넣어 주고, 계정 ID와 PW를 작성해줍니다. URL에 경로를 붙여 넣어주면 Host와 Repository path는 자동으로 생성됩니다. Next를 눌러줍니다. 더보기 Select branches to clone from remote repository. 원격 저장소에서 복제할 분기를 선택하십시오. Remote tracking branches .. 2023. 3. 8.

티스토리툴바