AD

Q&A 트게더를 크롤링하려는데

시빌님
2019-05-17 22:57:04 1200 1 7

980cf68ef9377df09464160e817d7783.pngrobots.txt에서 거부하는 것들의 의미가 게시판에 관련된 모든 항목에 대한 크롤링을 거절하는 것이라고 보면 되나요?

용도는 언어학습을 용도의 데이터 수집으로 게시글 제목, 내용 텍스트만 긁으려는데 이런 데이터도 *에 포함되는건가 싶어서요.

목록
후원댓글 7개
댓글 7개   ▼
이전 댓글 더 보기
TWIP 잔액: 확인중원
원
▲윗글 네트워크겜 서융_
자유강의Q&A프로젝트 소개
1
자유
학부 1학년인데 질문좀 드려도 될까요? [3]
ddss
06-01
0
자유
안녕하세요 html의 submit 관련해서 궁금한게 있습니당 [4]
메탈사시미
05-31
0
자유
명령프롬프트에서 디렉토리 선택을 이름말고 다른걸로 할수 있나요 [3]
dd
05-29
0
자유
C# 도 안드로이드 앱개발 원활하게 가능한가요? [2]
기리보이
05-27
10
자유
알고리즘 풀다보면 컴퓨터 감수성이 느는거 같아요 [4]
두부맛사탕
05-27
1
자유
C언어 배워보고 싶습니다. [7]
대형트럭
05-24
0
Q&A
주피터 궁금증 [1]
eipi_1
05-24
3
자유
학부생 여러분 여기는 지옥이에요
press8888
05-24
0
자유
도메인 만료 부들부들 [1]
소세지야채볶음_
05-24
1
자유
알바로 모토로라 어셈블리 보고있는데 [2]
김치보쌈
05-21
24
자유
온갖 트롤링이 가득한 코드 모음집 [4]
이하여백
05-21
0
Q&A
네트워크겜 [4]
서융_
05-18
»
Q&A
트게더를 크롤링하려는데 [7]
시빌
05-17
0
Q&A
오디오쪽으로 플밍 해보신분 계신가요? [2]
서융_
05-17
1
자유
학교에서 아구이노한다는 데 [3]
박설명
05-14
0
자유
물리전공 학부생인데 프로그래밍도 좋아해서 그 둘을 동시에 하고 싶습니다. [4]
준수하고싶다
05-12
7
자유
물어보기 전에 구글에 해당 내용을 검색해보세요 [1]
흐히히흐헤헤
05-11
0
자유
오라클 데이터베이스 질문.. [2]
찬웅
05-10
2
자유
제가유 컴퓨터공학과 신입생인데유 괜찮으시면 질문좀 하겠읍니다 [4]
삑삑두
05-10
9
Q&A
프로그래밍을 공부하고싶은 학생입니다. [17]
려화
05-09
1
자유
즐겨찾기같은거 만드려면 어떻게해야할까요? [5]
찬웅
05-09
0
Q&A
컴공과 편입생을 살...려주세요.. [6]
휠렛버거
05-07
1
자유
멀티 스레딩 입문하려고 합니다. [5]
띠탕이
05-06
2
자유
초보개발자 코드리뷰 부탁드립니다 [18]
고9마9웠어요ㅠ
05-04
0
자유
DB질문) 게시판마다 테이블을 하나씩 만들어줘야하나요? [7]
찬웅
05-02
0
Q&A
혹시 자동제어쪽 좀 아시는 분 계신가요 [2]
릴까치_
04-27
0
자유
쓰앵님... 알고리즘... [1]
RAnDi65535
04-25
32
자유
프로그래밍의 새로운 패러다임 [2]
흐히히흐헤헤
04-20
5
자유
무한반복하는 글 [21]
멘탈조각
04-13
0
자유
배열 중복체크를 시간복잡도O(n)으로 어케 짜나여 [5]
클리커
04-11
인기글 글 쓰기
  • 제목+내용
  • 닉네임
    •