환영합니다. 바다아이 홈페이지 입니다.

'이태원 150명 넘게 죽은 핼러윈 참사.. 오세훈 탄핵.. 윤석열 탄핵.... 행안부 장관 이상민은 사람이냐... 말만 하면 책임 회피..'

이번주 로또 및 연금번호 발생!! |

HOME |

여기는? |

바다물때표 |

알림 (19) |

여러가지 팁 (1095) |

추천 및 재미 (163) |

자료실 (28) |

시사, 이슈, 칼럼, 평론, 비평 (798) |

끄적거림 (142) |

문예 창작 (719) |

바람 따라 (75) |

시나리오 (760) |

드라마 대본 (248) |

살인!

리눅스 데스크탑 (248)
리눅스 서버 (155)
윈도우 관련 (8)
freebsd 데스크탑 (31)
freebsd 서버 (34)
쉘 스크립트 (6)
html/css/xml (48)
html5 (4)
golang (180)
php (2)
디자인 관련 (1)
javascript/jquery (77)
DATABASE (9)
postgresql (45)
mariadb, mysql (38)
생활/쇼핑 (39)
컴퓨터/핸드폰 (46)
종교/자선 (3)
요리관련 (22)
음식관련 (15)
의학관련 (9)
건강/운동 관련 (13)
주식, 금융관련 (3)
자동차, 운전 관련 (21)
기계 관련 (10)
스포츠 관련 (1)
과학, 수학관련 (1)
문학관련 (8)
좋은 글 (8)
낚시관련 (1)
원예관련 (9)

현재 접속자

바다아이에게 후원하기

개정 공동번역 성경보기

기존 공동번역 성경보기

소스 하이라이팅

도로명 주소검색

URL encode, decode

리눅스 설명

javascript 줄 맞추기

Hits :

html/css/xml

html/css/xml - robots.txt, 사이트 검색 로봇 설정...

이 름 : 바다아이 | 조회수 : 8476

의무적이지는 않습니다. 다만 서로 업체들끼리 상도덕이라 보시면 됩니다. 
원치않는 크롤링을 방지할 수 있습니다. 
 
공백조심하시고 (공백 잘 보세요.. 있는 곳과 없는 곳.. 중요합니다.) 
/ 슬래시 주의 하시고요.. 위에부터 순차적 해석입니다. 
주석은 # 입니다. // 요거 아닙니다. 
 
 
예제&gt;

1. 사이트내에 모든 문서를 모든 로봇에게&nbsp;접근 허용

&nbsp;Allow: /&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&lt;- 모든 문서 허용
			</td>
		</tr>
	</tbody>
</table>

&nbsp;

2. 사이트내에 모든 문서 모든 봇 차단

&nbsp;Disallow: /&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &lt;--모든 문서 차단
			</td>
		</tr>
	</tbody>
</table>

&nbsp;

3. 특정봇, 특정 폴더, 파일에 대한 차단

<table border="0" cellpadding="0" cellspacing="0" class="txc-table" style="border-bottom:medium none; border-collapse:collapse; border-left:medium none; border-right:medium none; border-top:medium none; font-family:'맑은 고딕',sans-serif; font-size:13px; width:498px">
	<tbody>
		<tr>
			<td style="background-color:#faf4c0; border-bottom:#cccccc 1px solid; border-left:#cccccc 1px solid; border-right:#cccccc 1px solid; border-top:#cccccc 1px solid; height:24px; width:498px">
			User-agent: *&nbsp;&nbsp;&nbsp;&nbsp; &lt;--모든 봇 
			Disallow: /owner/ &nbsp; &lt;--특정폴더 차단 
			Disallow: /admin/ 
			Disallow: /oldadmin/ 
			Disallow: /search/searh.jsp&nbsp;&nbsp; &lt;--특정파일 차단 
			Disallow: /m/search/ 
			Disallow: /m/admin/ 
			Allow: /&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &lt;--위에서 차단한 폴더, 문서를&nbsp;제외한 모든 문서 허용 
			 
			User-agent: Mediapartners-Google&nbsp;&nbsp;&nbsp; &lt;--특정 봇에 대하여 
			Allow: /&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; &lt;-- 모든 문서 허용
			</td>
		</tr>
	</tbody>
</table>
 
 
출처: <a href="https://devlinker.tistory.com/4" target="_blank">https://devlinker.tistory.com/4</a> [Devlinker -Software Developer] 
 
 
 
아래는 나무위키에서 퍼왔네요... 
 
 
반드시 폴더명 맨 끝에 / 를 붙여야 한다. 
붙이지 않으면 확장자가 없는 파일로 인식하기 때문에 제대로 작동하지 않는다. 
 
특정 디렉토리의 접근을 허가하려면 
 
User-agent: 제어할 로봇의 User-Agent 
Allow: /foo/bar/ 
 
특정 디렉토리의 접근을 차단하려면 
 
User-agent: 제어할 로봇의 User-Agent 
Disallow: /foo/bar/ 
 
모든 문서에 대해 접근을 허가하려면 (사실상 의미는 없다.) 
 
User-agent: * 
Allow: / 
 
모든 문서에 대해 접근을 차단하려면 
 
User-agent: * 
Disallow: / 
 
모든 문서에 대해 접근을 차단하고, 첫 페이지에 대해서만 허가 
 
User-agent: * 
Disallow: / 
Allow: /$ 
 
 
나무위키 예제.. 
 
User-agent: * 
Disallow: / 
Allow: /$ 
Allow: /ads.txt 
Allow: /w/ 
Allow: /backlink/ 
Allow: /OrphanedPages 
Allow: /UncategorizedPages 
Allow: /ShortestPages 
Allow: /LongestPages 
Allow: /RecentChanges 
Allow: /RecentDiscuss 
Allow: /js/ 
Allow: /img/ 
Allow: /css/ 
Allow: /skins/ 
Allow: /favicon.ico 
Allow: /_nuxt/ 
&nbsp;

짧은 주소 : https://www.bada-ie.com/su/?621613224433

의무적이지는 않습니다. 다만 서로 업체들끼리 상도덕이라 보시면 됩니다.
원치않는 크롤링을 방지할 수 있습니다.

공백조심하시고 (공백 잘 보세요.. 있는 곳과 없는 곳.. 중요합니다.)
/ 슬래시 주의 하시고요.. 위에부터 순차적 해석입니다.
주석은 # 입니다. // 요거 아닙니다.

예제>

1. 사이트내에 모든 문서를 모든 로봇에게 접근 허용

User-agent: * <-모든 봇

Allow: / <- 모든 문서 허용

2. 사이트내에 모든 문서 모든 봇 차단

User-agent: * <--모든 봇

Disallow: / <--모든 문서 차단

3. 특정봇, 특정 폴더, 파일에 대한 차단

User-agent: * <--모든 봇
Disallow: /owner/ <--특정폴더 차단
Disallow: /admin/
Disallow: /oldadmin/
Disallow: /search/searh.jsp <--특정파일 차단
Disallow: /m/search/
Disallow: /m/admin/
Allow: / <--위에서 차단한 폴더, 문서를 제외한 모든 문서 허용

User-agent: Mediapartners-Google <--특정 봇에 대하여
Allow: / <-- 모든 문서 허용

출처: https://devlinker.tistory.com/4 [Devlinker -Software Developer]

아래는 나무위키에서 퍼왔네요...

반드시 폴더명 맨 끝에 / 를 붙여야 한다.
붙이지 않으면 확장자가 없는 파일로 인식하기 때문에 제대로 작동하지 않는다.

특정 디렉토리의 접근을 허가하려면

User-agent: 제어할 로봇의 User-Agent
Allow: /foo/bar/

특정 디렉토리의 접근을 차단하려면

User-agent: 제어할 로봇의 User-Agent
Disallow: /foo/bar/

모든 문서에 대해 접근을 허가하려면 (사실상 의미는 없다.)

User-agent: *
Allow: /

모든 문서에 대해 접근을 차단하려면

User-agent: *
Disallow: /

모든 문서에 대해 접근을 차단하고, 첫 페이지에 대해서만 허가

User-agent: *
Disallow: /
Allow: /$

나무위키 예제..

User-agent: *
Disallow: /
Allow: /$
Allow: /ads.txt
Allow: /w/
Allow: /backlink/
Allow: /OrphanedPages
Allow: /UncategorizedPages
Allow: /ShortestPages
Allow: /LongestPages
Allow: /RecentChanges
Allow: /RecentDiscuss
Allow: /js/
Allow: /img/
Allow: /css/
Allow: /skins/
Allow: /favicon.ico
Allow: /_nuxt/

1 page / 2 page
번 호	카테고리	제 목	이름	조회수
48	html/css/xml	자주 쓰는 엔티티코드... 사용 빈도수가 높은 엔티티 코드 정리	바다아이	3565
47	html/css/xml	ckeditor 소스보기 누르면 css 날아가는 현상,,, 문제.. ckeditor 소스보기 문제	바다아이	4744
46	html/css/xml	ckeditor font size 설정하기, ckeditor 기본 폰트 크기 설정, ckeditor 줄바꿈 <br>, width height 설정.	바다아이	5990
현재글	html/css/xml	robots.txt, 사이트 검색 로봇 설정...	바다아이	8477
44	html/css/xml	CSS / letter-spacing, word-spacing / 글자 사이 간격, 단어 사이 간격, 자간	바다아이	8166
43	html/css/xml	ie 인터넷 익스플로러 폰트 적용 문제, 인터넷 익스플로러 나눔폰트 적용...	바다아이	7923
42	html/css/xml	html 에서 탭 tab 키 사용하기, 표현하기....	바다아이	14959
41	html/css/xml	css 전원 스위치 on/off 버튼, toggle switch 버튼, 토글스위치	바다아이	10003
40	html/css/xml	pt, px, em, %, font 폰트 글꼴의 단위에 따른 크기 사이즈 비교표, 폰트 크기, 글씨 크기	바다아이	9913
39	html/css/xml	폰트 글꼴(font face) 목록	바다아이	9994
38	html/css/xml	고정 레이어 예제....	바다아이	9965
37	html/css/xml	html 문서 MIME 타입 확인...	바다아이	14147
36	html/css/xml	ckeditor ajax 통신시 본문값이 빈값으로 들어가는 문제....	바다아이	10506
35	html/css/xml	[정규표현식] 정규표현식 정리, 정규식	바다아이	14286
34	html/css/xml	홈페이지, 사이트 주소 앞에 아이콘, 주소창 작은 아이콘, ico 파일	바다아이	9897
33	html/css/xml	브라우저 input 태그의 자동완성 기능 해제하기, 끄기 autocomplete	바다아이	10676
32	html/css/xml	[CSS] 테두리 및 외곽선을 둥글게 표현하기, border-radius, 라운드	바다아이	11642
31	html/css/xml	ckeditor 4 메뉴 툴바 도구 선택...	바다아이	12204
30	html/css/xml	HTTP/2 왜 지금 적용해야 하는가?	바다아이	19619
29	html/css/xml	HTTP/2란 무엇인가?	바다아이	10379
28	html/css/xml	사이트맵 xml 예제.... sitemap.xml	바다아이	10373
27	html/css/xml	ckeditor config.js 설정 기본값....	바다아이	11476
26	html/css/xml	이미지 없을 때 엑스박 대신 다른 이미지 보여주기	바다아이	11233
25	html/css/xml	레이어 팝업 소스	바다아이	10181
24	html/css/xml	테이블, 이미지 테두리관련 border 스타일	바다아이	10610
23	html/css/xml	테이블 깨짐, 깨지는 것 방지	바다아이	11041
22	html/css/xml	특수문자 코드표 (=특수문자 HTML 엔티티 코드), entity code	바다아이	11398
21	html/css/xml	원화(Won;￦) 대신 백슬래시(＼;Backslash; 백슬래쉬)로 나타내기, 역슬래시, 역슬래쉬	바다아이	16090
20	html/css/xml	특수문자 리스트	바다아이	10826
19	html/css/xml	블로그/웹에서 소스코드 하이라이트/구문강조 사용하기	바다아이	11434
1 2
\| \|

Copyright ⓒ 2001.12. bada-ie.com. All rights reserved.
이 사이트는 리눅스에서 firefox 기준으로 작성되었습니다. 기타 브라우저에서는 다르게 보일 수 있습니다.
[ Ubuntu + GoLang + PostgreSQL + Mariadb ]
서버위치 : 오라클 클라우드 춘천 실행시간 : 0.12741 초
to webmaster... gogo sea. gogo sea.