 | 메타 봇파일 시스템 크롤러 |
| 지금 다운로드 | |
메타 봇 순위 및 요약
광고
메타 봇 태그
메타 봇 설명
파일 시스템 크롤러 Methabot 소프트웨어는 속도가 최적화되고 스크립팅 가능하며 매우 구성 가능한 웹, FTP 및 로컬 파일 시스템 크롤러입니다. 그것은 스크립트 된 필레 유형 구문 분석, 다양한 사용자 정의 옵션을 지원하며 anyone 특정 요구 사항에 맞게 쉽게 구성되어 있습니다. 모듈 시스템 및 스크립팅 언어의 사용 및 사용자는 크롤 링 프로세스의 전체 또는 부분 제어를 취할 수 있고 methabot을 결정할 수 있습니다. 웹 데이터, 통계 및 훨씬 더 많은 것을 저장해야합니다. 명령 줄에서 methabot을 실행하여 사용자 정의 파일 형식, 표현식, 동작 등을 필터링 할 수 있으므로 스크립터가 될 필요가 없습니다! 다음은 "methabot"의 주요 기능이 있습니다. · 그것은 빠르고, 지상에서 속도가 최적화되어 있습니다. · E4X로 JavaScript를 통해 스크립팅 가능 · 사용자 정의 파일 형 필터링 (MIME 유형, 파일 확장명 또는 UMEX 표현식에 따라) · 멀티 스레드 · 명령 줄에서 매우 구성 할 수 있습니다 · 사용자 정의 데이터 파서 및 필터를 지원하는 확장 가능한 모듈 시스템. umx를 통한 URL의 간단하면서도 강력한 필터링. · 자동 다운로드 · HTTP를 실행할 때 자동 쿠키 처리 지원 · 신뢰할 수있는 내결함성 네트워킹 · 32 비트 / 64 비트 Linux 2.6, 32 비트 / 64 비트 FreeBSD 6.x / 7.0, Windows XP 및 Mac OS X에서 성공한 휴대용 테스트를 거의 모든 UNIX와 같은 OS에서 작동해야합니다. 요구 사항 : · 스파이더미 키 헤더 · 컬 및 libcurl. 이 릴리스에서는 새로운 기능 : · BugFix, 외부 엿보기가 사용되었을 때 깊이 한계가 엉망이되었습니다. · 메모리 사용 정리 수정 · Dynamic-URL 옵션은 더 이상 크롤링을 크게 느리게 늦추기 때문에 기본적으로 조회로 설정되지 않습니다. · 빌드 시스템 이제 모듈이 링크 할 때 사용할 수있는 일부 헤더 파일을 만들고 설치합니다. · Metha-config 도구가 추가되었습니다 · LMM_MYSQL 은이 패키지를 벗어났습니다
메타 봇 관련 소프트웨어
