Программа для поиска файла по ftp. Интернет: как это работает. File Transfer Protocol и FTP-клиенты. Какие есть поисковики для поиска файлов по FTP

Вам приходилось когда-нибудь искать в Интернете информацию? А искали ли вы в Сети какие-нибудь программы? Если искали, то, наверно, потратили на поиск много времени и нервов. Конечно, если вы знаете точный адрес, где находится утилита, - никаких проблем не возникает, просто напускаете на этот адрес вашу любимую качалку, и все. Ну а если у вас нет точного адреса? В этом случае у вас есть два варианта. Первый - вы идете на какой-нибудь сайт, где собраны различные программы, и ищете, ищете и еще раз ищете. Хорошо, если в конце концов найдете, а если нет? Можно, конечно, воспользоваться услугами специальных поисковых систем (того же "Рамблера"), но и такой ход далеко не всегда ведет к успеху (увы, система поиска по названиям фалов в сайтах-поисковиках пока весьма несовершенна). И вот тут-то в дело вступает еще один вариант: использование специальных утилит, которые облегчают поиск файлов на огромных просторах FTP-серверов.
У вас может возникнуть вопрос: а зачем оно нам? Можно ведь самому посмотреть на содержимое этих серверов. Вот только все подобные программы посылают запрос сразу на несколько FTP и формируют отчет о проделанной работе, в результате чего экономится ваше время. Предлагаем вашему вниманию две наиболее популярные программы этого класса. Краткий обзор функций и - что самое важное - тонкости настройки приложений.

FTP Wolf

Разработчик : TRELLIAN
Размер : 1 Mb
Лицензия : Shareware
Язык интерфейса : Английский
www.trellian.com/fwolf

FTP Wolf - довольно простая и в то же время очень мощная программа для поиска файлов на FTP-архивах. Можно сказать, что данная утилита не требует от пользователя каких-либо усилий для настройки. Единственное, что вам необходимо указать программе, это то, какой браузер вы используете (почему-то сама она его с ходу не видит) и адрес вашего proxy-сервера (конечно, если вы используете proxy для подключения к Интернету). Для этого вам нужно войти в меню Options и выбрать в нем пункт Preferences . Браузер выбирается в строке HTML Browser , программа сама просматривает ваш диск и находит, какие браузеры у вас установлены. Просто выберите тот, каким обычно пользуетесь (сомневаюсь, что у большинства из вас на машине установлено больше одного браузера). Proxy-сервер назначается в строке... правильно, Proxy Server . Номер порта пропишите в строке Port .
Больше ничего настраивать не нужно. FTP Wolf готов к работе. Давайте попробуем найти какой-нибудь файл на FTP-архивах. Введите имя файла в строке Filename , выберите поисковые системы, которые вы хотите использовать при поиске (в окне Engine

поставьте галочку напротив поисковой системы). Теперь вам осталось только нажать на кнопку Find и немного подождать. По мере того как ваш запрос будет обрабатываться, во вкладке Search Result будут отображаться данные, найденные во время работы (имя файла, размер и адрес).
Если активировать пункт Exact Matc , то Wolf будет искать все файлы, в которых встречается введенное вами имя. Например, если вы подали запрос найти doom.zip, программа выведет на экран такие файлы, как modoom.zip и т.п.
Также следует упомянуть о закладках Appz , Net и Gamez . В них вы найдете адреса наиболее популярных программ, сетевых утилит и игр соответственно. Программы расположены по алфавиту, плюс присутствует информация об их размере. Если же вы хотите попасть на сайт разработчиков какой-то из утилит, просто выберите нужную вам программу и нажмите кнопку Home , ну а для немедленной скачки смело жмите на Get It .
В завершение рассказа о программе хочу сказать, что незарегистрированная версия будет работать 30 дней, причем будут недоступны большинство поисковых систем (в том числе и российские). Ну а зарегистрированная версия на данный момент поддерживает 26 самых крупных поисковых систем по всему миру, и список этот постоянно пополняется.

FileFerret

Разработчик : FerretSoft
Размер : 750 Kb
Лицензия : Shareware
Язык интерфейса : Английский
www.ferretsoft.com

FileFerret - это отличное средство для поиска различных файлов по необъятным просторам FTP-архивов. Данная программа при поиске нужного вам файла просматривает большое количество поисковых систем и arсhive-сайты. Причем после завершения обработки вашего запроса утилита не будет выводить в результатах поиска двойные ссылки. То есть если программа получит от разных поисковых систем ссылку на один и тот же адрес, то не будет дублировать эту ссылку в своем отчете (в то время как обычные поисковики могут выдать вам несколько ссылок на один и тот же адрес, что увеличит время, затраченное вами на систематизацию полученной информации).
После того как нужный вам файл будет найден, вы можете скачать его, используя все тот же FileFerret, - вам не понадобится другой FTP-клиент, FileFerret отлично справляется с поставленной перед ним задачей.
Давайте теперь рассмотрим работу с этой программой более подробно. Во время инсталляции программа спросит у вас адрес вашего proxy-сервера. Если вы используете его при подключении к Интернету - укажите адрес. Если же вы его не используете, просто оставьте это поле пустым. Можно сказать, что на этом настройка FileFerret закончена, и что программа полностью готова к работе.
Первое, что вам необходимо сделать, это указать утилите, что ей нужно искать. Для этого введите ключевые слова для поиска в графе Named ; также вы можете указать, как осуществлять поиск, - искать точное совпадение (All ) или же искать любое из
введенных вами слов (Any ). Будет нелишним ограничить поиск нужной вам информации серверами, которые расположены ближе к вашему месту жительства. Делается это с помощью пункта Look in . Также вы можете выбрать поисковые системы, используемые программой, зайдя в меню View\Options\Search . После того как вы укажете параметры поиска - нажимайте на кнопку Find Now или просто на клавишу Enter .
После того как FileFerret начнет обрабатывать ваш запрос, перед вами будет появляться информация о результатах поиска. Эта информация включает в себя следующие разделы:
Name - в первой колонке будет показано имя найденного файла;
In Folder - во второй колонке указывается папка, где расположен файл;
Server - в третьей колонке будет показано имя сервера, на котором найден файл;
Size - в четвертой колонке будет показан размер файла. Если вместо размера вы увидите ?? , то это означает, что размер все еще определяется;
Type - в пятой колонке - тип найденного файла;
Modified - шестая колонка показывает время последнего изменения данного файла;
Source - в последней колонке указывается название поисковой системы, которая нашла данный файл. Если остальные поисковые системы также найдут точно такой же файл, то FileFerret не будет повторно дублировать эту информацию.
Однако может возникнуть такая ситуация, что затребованный вами файл находится на многих серверах, и чтобы ограничить число запросов, вы можете установить максимальное число найденных файлов. Для этого войдите в меню View\Options\Advanced и укажите там число файлов. После того как FileFerret найдет заданное количество - поиск прекратится.
Чуть выше я говорил, что FileFerret может самостоятельно скачать найденный файл, но если вы не хотите доверять это ответственное дело программе, а предпочитаете использовать ваш любимый FTP-клиент, то вам будет нужно указать, чем нужно пользоваться для записи файлов. Для этого войдите в меню View\Options\Clients и пропишите тот клиент, который вы хотите использовать при загрузке. Но допустим, вы используете какую-то экзотическую утилиту, и FileFerret не смог автоматически распознать ее, - в таком случае просто укажите программе путь до вашего FTP-клиента. Для этого в том же меню используйте кнопку Add .
Ну вот, файл мы нашли, теперь осталось записать его на ваш компьютер. Это можно сделать несколькими способами. Первый: войдите в меню File\Retrieve и оттуда запишите файл. Второй: щелкните правой кнопкой мыши по нужному файлу и в появившемся меню опять же выберите пункт Retrieve . Наконец, можно просто кликнуть два раза по файлу, который вы хотите скачать, и процесс записи начнется.
В завершение разговора о "стационарных" поисковиках предлагаем вам ознакомиться с утилитой для поиска информации в веб-страницах . Для того чтобы найти нужную вам информацию, вы можете больше не использовать поисковые системы. Вместо этого установите себе небольшую программку,
которая будет сама делать за вас всю "грязную" работу, а вам останется всего лишь воспользоваться теми ссылками, которые нашла утилита.

WebFerret

Разработчик : FerretSoft
Размер : 731 Kb
Лицензия : Shareware
Язык интерфейса : Английский
www.ferretsoft.com

Основное достоинство этой программы в том
, что она ищет нужную вам информацию сразу на нескольких поисковых машинах, а именно: AltaVista , AOL NetFind , EuroSeek , Galaxy, Infoseek , LookSmart, Lycos , SEARCH.COM , WebCrawler и Veronica . Согласитесь, что вы потратили бы очень много времени, если бы вводили запросы на каждый из этих серверов отдельно, и еще больше времени у вас бы ушло на систематизацию той информации, которую вы получили бы от поисковых серверов. Но если вы установите WebFerret - поиск различных данных в Интернете превратится для вас в отдых.
Подробно описывать интерфейс программы не имеет смысла, он очень похож на FileFerret, и я опишу только основные возможности. Никаких особых настроек после установки программы вам делать не придется, единственное, что вам нужно изменить в стандартных настройках, - это путь к вашему браузеру. Да и то, это придется делать лишь тем, кто использует что-либо нестандартное. Если же вы используете Internet Explorer или Netscape Navigator, то можете приступать к работе сразу же после установки.
Ключевое слово или фразу, по которым осуществляется поиск, необходимо ввести в строке Containing . Ниже этой строки есть два переключателя, положение которых напрямую влияет на результаты поиска: All keywords и Any keywords . Если выбрать All keywords - программа будет искать страницы, на которых есть все введенные вами слова; выбрав же Any keywords, вы получите адреса всех страниц, где содержатся введенные вами ключевые слова. Если же вы хотите, чтобы программа искала точное совпадение введенной вами фразы, необходимо заключить ее в двойные кавычки. Например, введя в строке Containing фразу "best soft in the world", вы получите ссылки на те страницы, где встречается эта фраза.
Если вы не хотите использовать для поиска все поисковые сервера, имеющиеся в программе, вы можете самостоятельно указать, где именно осуществлять поиск. Для этого вам достаточно войти в меню Search Engine и указать там только те, которые вам действительно необходимы.

* * *

Ну вот, мы рассмотрели и научились работать с двумя наиболее популярными программами для поиска файлов на FTP-сайтах (и даже одну для поиска в Вебе). Надеюсь, что теперь у вас не будет возникать сложностей с поиском нужных вам программ на просторах Интернета. И очень надеюсь, что эта статья поможет вам сократить время, потраченное на поиск программ, и сберечь вам свободное время для чтения нашего журнала...
P.S. Бесплатные версии всех описанных в статье программ вы можете найти на нашем компакте .

Большинство пользователей используют FTP только для того, чтобы решать какие-то вопросы с сайтом. Не все знают, что при помощи этого протокола можно быстро скачивать данные со специальных серверов. Проблема в том, что мало кто слышал о специальных поисковиках для поиска файлов по FTP. Именно такой FTP поиск и будет рассмотрен в данной статье. Вы узнаете как работает поисковик для FTP-серверов, какие есть сервисы поиска и как ими пользоваться.

Как работает поисковик по FTP

В Интернете есть множество сайтов и большое количество серверов FTP. Не все сервера защищены паролями и логинами, так как не каждый хост используют для хранения какой-то приватной информации или данных сайта. Потому появились специальные сервисы, которые позволяют просматривать файлы внутри серверов с разрешенным анонимным подключением.

Работают поисковики по FTP точно так же, как и обычные поисковые системы, только у них функций гораздо меньше.

Все, что они делают — это сверяют ваш запрос с названиями файлов, которые находятся на серверах. И хоть это весьма ограниченный вид поиска, зато найденные документы и файлы вы сможете скачивать с большой скоростью, чего никогда не позволит стандартный загрузчик браузера.

Использовать поисковики такого плана рекомендуется только в том случае, если вы ищите какой-то файл в Интернете и хотите найти ссылку, чтобы можно бы сразу скачать его. На FTP-серверах нет какой-либо рекламы и обманных ссылок — стопка файлов сразу находится перед вами, остается только подключиться к серверу, зайти в нужный каталог и скинуть данные к себе на компьютер. А сделать это можно либо при помощи специальной программы-клиента, наподобие FileZilla, либо при помощи стандартных возможностей операционной системы через проводник.

Какие есть поисковики для поиска файлов по FTP

Ранее существовал популярный сервис AllTheWeb с возможностью фильтрации данных по FTP. Несколько лет назад он был самым популярным в плане поиска файлов по различным серверам протокола FTP. Но сейчас такого сервиса нет — он превратился в Yahoo, и возможность искать внутри сети серверов FTP убрали.

Но остались многие другие поисковики оп FTP, которые по-прежнему функционируют. Один из таких — это сервис FindFiles. К сожалению, его возможности во многом ухудшились. Теперь вы можете искать через этот сайт приложения без использования FTP-серверов. Но для пользователей ПК, которые ищут определенную программу, сервис будет полезным.

Один из сохранившихся FTP-поисковиков, который до сих пор предоставляет хорошие результаты выдачи во время поиска — это сервис FileSearch. В целом, его функциональность минимальна. Вы сможете выбрать тип файла, который ищите (аудио, папка, музыка, картинка, видео или название сервера), а также поиск по миру или только в России. Потом вводите поисковую фразу и получаете список путей к файлам на разным FTP-серверах планеты. Теперь вам нужно лишь подключиться к ним при помощи анонимного подключения и перенести данные на компьютер.

Другой не менее популярный сервис поиска по FTP мирового масштаба — это Напалм. В нем содержится информация о более чем миллиарде файлов на почти 16 тысячах серверах, что для FTP-поисковика является хорошим показателем! Единственная опция во время поиска — это либо искать по всем словам из поисковой фразы, или по любому слову из нее. Более подробная фильтрация поиска доступна уже после того, как вы введете поисковую фразу в строке. Затем вы сможете отсортировать файлы по дате, по размеру и отыскать тот формат, который вам нужен.

Указанных двух серверов достаточно, чтобы вы могли быстро находить необходимые файлы на серверах. Такой поиск очень понравится любителям игр, потому что поисковик Напалм выдает множество игр и программ, которые сразу после загрузки можно будет установить на компьютер.

FTP (File Transfer Protocol - протокол передачи файлов) появился в 1971 году и активно используется по сей день. Этот стандартный Интернет-протокол — простейший способ для обмена файлами между компьютерами в Интернете. FTP базируется на протоколах базового уровня TCP/IP.

сновное назначение FTP - пересылать (копировать, передавать) файлы в Интернете с удаленного компьютера на локальный (Download) и с локального компьютера на удаленный (Upload). C помощью FTP-протокола можно также работать со своими файлами прямо на удаленном компьютере. Нужно отметить, что в отличие от Web-серверов, которые предоставляют информацию только для чтения, FTP-серверы позволяют пользователям не только скачивать информацию, но и добавлять информацию на сервере. В частности, чтобы передать файлы, из которых конструируются Web-страницы, пользуются именно FTP-протоколом.

Естественно, что права изменять информацию на сервере должны предоставляться только владельцам данной информации. Права пользователя при обращении к FTP-серверу регламентируются логином и паролем, но это не означает, что в Сети нет серверов, доступных широкой аудитории. На многие серверы можно получить доступ под условным именем, и в этом случае вам будет доступен ограниченный набор файлов.

В общем случае формат адреса FTP-ресурса имеет вид:

ftp://:@:/, где:

  • user - имя пользователя (логин);
  • password - пароль;
  • host - доменное имя или IP-адрес сервера;
  • url-path - путь к файлу.

Порт обычно не указывается, а используется стандартный - 21.

Для обращения к серверам общего доступа в качестве имени пользователя достаточно указать anonymous, а в качестве пароля - свой почтовый адрес. Для анонимного FTP в url принят упрощенный синтаксис: ftp:///, то есть при отсутствии имени автоматически будет вставлено anonymous.

FTP-клиенты

лужба FTP основана на клиент-серверной архитектуре. На клиентском компьютере запускается программа-клиент, которая соединяется с сервером и передает или получает файлы. Доступ на FTP-сервер может осуществляться с помощью FTP-клиентов разных классов, а именно:

  • консольный клиент - программа ftp.exe, поставляемая вместе с операционной системой Windows;
  • FTP-клиент, встроенный в браузер (например, Internet Explorer или Netscape Navigator);
  • FTP-клиент, встроенный в файловый менеджер (в частности, FAR или Windows Commander);
  • FTP-клиент, встроенный в HTML-редактор (HomeSite, Dreamweaver или FrontPage);
  • специальные программы (например, CuteFTP или WS FTP).

Доступ с помощью ftp.exe

Ftp.exe - это консольный клиент, который не имеет графического интерфейса и наименее удобен. Мы приводим его только потому, что он полезен для уяснения основного вопроса, вынесенного в заголовок: «как это работает».

Запустив программу ftp.exe, вы войдете в интерактивный сеанс: программа предоставит вам командную строку и будет ждать запросов. Для ведения диалога существуют несколько десятков команд, ряд которых приведен ниже:

  • cd [удаленная_директория] - сменить директорию;
  • mkdir [имя_директории] - создать директорию на удаленной машине;
  • get [удаленный_файл] [локальный_файл] - передать копию удаленного файла на ваш компьютер. Если имя локального файла не было задано, то оно совпадает с именем удаленного файла;
  • reget [удаленный_файл] [локальный_файл] - докачать удаленный файл в том случае, когда часть его уже есть на локальной машине. Команда особенно полезна для получения больших файлов при возможных резервах соединения;
  • put [локальный_файл] [удаленный_файл] - переслать файл на удаленную систему. Если имя удаленного файла не указано, то оно совпадает с именем на локальной системе;
  • delete [удаленный_файл] - стереть удаленный файл;
  • close - оборвать FTP-сеанс с удаленным сервером и вернуть к командному интерпретатору;
  • bye - закончить работу с FTP-сервером (приводит к выходу из интерпретатора).

Примечание. Полный список команд и дополнительные сведения можно получить в RFC 959.

Следует отметить, что FTP-протокол предоставляет долговременное интерактивное соединение, в то время как протокол HTTP передает запрошенный объект в рамках одной сессии, а потом разрывает соединение. FTP позволяет вести диалог и поддерживать соединение, пока не будет дана команда о прекращении сеанса связи.

FTP-протокол понимает два типа файлов - текстовые и двоичные, причем все нетекстовые файлы воспринимаются как двоичные. Работа через FTP-соединение осуществляется так же, как обмен текстовыми сообщениями (служебными командами), и непосредственно теми файлами, которые перемещаются между двумя компьютерами.

Консольная форма работы менее удобна для пользователей, но позволяет лучше понимать, что именно происходит, какие команды выполняет компьютер. Графический интерфейс дает оболочку, с которой удобнее работать, однако скрывает от пользователя некоторые процессы нижнего уровня. Поскольку графические интерфейсы более удобны, в дальнейшем будем говорить именно о них.

Доступ с помощью FTP-клиента, встроенного в файловый менеджер

айловый менеджер со встроенным FTP-клиентом расширяет свои функции - от уровня обслуживания файловой системы локального компьютера до уровня Интернета. Одним из наиболее удачных файловых менеджеров, который обеспечивает удобный доступ к файловым архивам в Интернет по протоколу FTP, является программа FAR. Она позволяет заранее настроить параметры соединения с FTP-сервером, набрав адрес сервера, имя и пароль для доступа, а также другие параметры. Таких соединений можно настроить любое количество, а затем соединиться c сервером, выбрав одно из настроенных ранее соединений. Список FTP-серверов может иметь ветвящуюся структуру, то есть внутри него можно создавать папки и помещать туда новые соединения с FTP-серверами или копировать уже существующие. После соединения работа с сервером по перекачке файлов ничем не отличается от работы с файлами на локальном компьютере. Доступны те же самые функции по копированию, удалению, созданию файлов и каталогов на FTP-сервере (рис. 2).

Немного иначе устроена работа с FTP-серверами в Windows Commander: список соединений с серверами представлен в виде отдельного окна, вызываемого из меню. В этом окне можно редактировать параметры соединений. После установления соединения с выбранным сервером это соединение видно как отдельный диск. В отличие от FAR, в Windows Commander можно одновременно открывать много соединений и работать с ними так же, как с дисками собственного компьютера. Если не нужно добавлять соединение в список, то можно не настраивать заранее параметры соединения с FTP-сервером, а задать их во время установления соединения. Есть возможность заранее создать список файлов, которые необходимо перекачать с FTP-сервера, и задать каталог, куда их записать.

Доступ с помощью специальных FTP-клиентов

уществует довольно много специализированных FTP-клиентов, имеющих удобный графический интерфейс и массу вспомогательных функций. Одной из самых популярных программ в этом ряду является программа CuteFTP. Рассмотрим ее последнюю версию более подробно.

CuteFTP 5.0 XP имеет простой наглядный интерфейс (рис. 4), удобную систему подсказок, вместо командной строки предлагает Windows-подобный интерфейс и поддерживает большинство стандартных для Windows функций, например drag-and-drop. Простой интерфейс позволяет воспользоваться продуктом практически без обучения.

Часто требуется организовать поиск по FTP-серверу. Для того чтобы поиск осуществлялся быстро, FTP-сервер сканируют и помещают названия всех файлов и пути к ним в один файл или таблицу базы данных. При помощи такого списка осуществлять поиск гораздо проще, нежели сканировать каждый раз весь хост. С другой стороны вам может быть интересно будет просканировать свой собственный FTP-хост чтобы получить представление о его организации. Это позволит оптимизировать или реорганизовать его структуру.

Создадим небольшое Web-приложение, состоящее из двух файлов: config.php (конфигурационный файл, содержащий параметры соединения с FTP-сервером и осуществляющий установку соединения) и index.php , который представляет собой непосредственно FTP-сканер.

Конфигурационный файл config.php

// Адрес FTP-сервера
$ftp_server = "ftp.server.ru" ;
// Порт соединения
$ftp_port = 21 ;
// Пользователь
$ftp_user = "softtime" ;
// Пароль
$ftp_password = "" ;
// Версия Web-приложение
$version = "1.0.0" ;
// Устанавливаем время исполнения скрипта 120 с
set_time_limit (120 );
// Пытаемся установить соединение с FTP-сервером
$link = ftp_connect ($ftp_server );
if(! $link ) puterror ("К сожалению, не удаётся установить соединение с FTP-сервером $ftp_server" );
// Осуществляем регистрацию на сервере
$login = ftp_login ($link , $ftp_user , $ftp_password );
//$login = ftp_login($conn_id, $ftp_user_name, $ftp_user_pass);
if(! $login ) puterror ("К сожалению, не удаётся зарегистрироваться на сервере" );
// Небольшая вспомогательная функция, которая выводит сообщение об ошибке
// в окно браузера
function puterror ($message )
{
echo "

$message

" ;
exit();
}
?>

Теперь, когда соединение установлено, можно осущестить рекурсивный спуск, по дереву директорий FTP-каталога

FTP-сканер index.php

// Устанавливаем соединение с FTP-сервером
require_once("config.php" );
// Директория на сервере
// $dir = "/html/forum/";
$dir = "/" ;
// Запускаем сканер
scan_ftp ($link , $dir );
// Закрываем соединение с FTP-сервером
ftp_close ($link );
// Результат находится в глобальном массиве $filename
echo "
"
;

print_r ($filename );
echo "
" ;

// Рекурсивная функция спуска по дереву
// директорий
function scan_ftp ($link , $dir )
{
GLOBAL $filename ;
// Получаем все файлы корневого каталога
// Дескриптор соединения $link получен в config.php
$file_list = ftp_rawlist ($link , $dir );
// Выводим содержимое каталога
foreach($file_list as $file )
{
// Разбиваем строку по пробельным символам
list($acc ,
$bloks ,
$group ,
$user ,
$size ,
$month ,
$day ,
$year ,
$file ) = preg_split ("/[\s]+/" , $file );
// Если файл начинается с точки - игнорируем его
if(substr ($file , 0 , 1 ) == "." ) continue;
// Определяем является ли объект директорией
if(substr ($acc , 0 , 1 ) == "d" )
{
// Директория
scan_ftp ($link , $dir . $file . "/" );
}
// Определяем является ли объект файлом
if(substr ($acc , 0 , 1 ) == "-" )
{
// Файл
$filename = $file . " - " . $dir . $file ;
}
}
}
?>

Результат помещается в глобальный массив $filename - поместить содержимое которого в файл или таблицу MySQL не составит труда. Более подробно приёмы работы с FTP-сервером обсуждаются в наших

gastroguru © 2017