C# Скачать все файлы и подкаталоги через FTP

Question

Общая информация
Я все еще в процессе изучения C#. Чтобы помочь себе, я пытаюсь создать программу, которая будет автоматически синхронизировать все мои локальные проекты с папкой на моем FTP-сервере. Это так, что, будь я в школе или дома, мне всегда доступны одни и те же проекты.

Я знаю, что есть программы вроде Dropbox, которые уже делают это для меня, но я подумал, что создание чего-то подобного сам многому меня научит на этом пути.

Эта проблема
Моим первым шагом к моей цели было просто загрузить все файлы, подкаталоги и подфайлы с моего FTP-сервера. Мне удалось загрузить все файлы из каталога с кодом ниже. Тем не менее, мой код только перечисляет имена папок и файлов в главном каталоге. Подпапки и подфайлы никогда не возвращаются и никогда не загружаются. Кроме того, сервер возвращает ошибку 550, потому что я пытаюсь загрузить папки, как если бы они были файлами. Я занимаюсь этим уже более 4 часов, но я просто не могу найти ничего о том, как решить эти проблемы и заставить его работать. Поэтому я надеюсь, что вы, ребята, поможете мне:)

Код

public string[] GetFileList()
{
    string[] downloadFiles;
    StringBuilder result = new StringBuilder();
    WebResponse response = null;
    StreamReader reader = null;

    try
    {
        FtpWebRequest request = (FtpWebRequest)WebRequest.Create(url);
        request.UseBinary = true;
        request.Method = WebRequestMethods.Ftp.ListDirectory;
        request.Credentials = new NetworkCredential(ftpUserName, ftpPassWord);
        request.KeepAlive = false;
        request.UsePassive = false;
        response = request.GetResponse();
        reader = new StreamReader(response.GetResponseStream());
        string line = reader.ReadLine();
        while (line != null)
        {
            result.Append(line);
            result.Append("\n");
            line = reader.ReadLine();
        }
        result.Remove(result.ToString().LastIndexOf('\n'), 1);
        return result.ToString().Split('\n');
    }
    catch (Exception ex)
    {
        if (reader != null)
        {
            reader.Close();
        }
        if (response != null)
        {
            response.Close();
        }
        downloadFiles = null;
        return downloadFiles;
    }
}

private void Download(string file)
{
    try
    {
        string uri = url + "/" + file;
        Uri serverUri = new Uri(uri);
        if (serverUri.Scheme != Uri.UriSchemeFtp)
        {
            return;
        }
        FtpWebRequest request = (FtpWebRequest)WebRequest.Create(url + "/" + file);
        request.UseBinary = true;
        request.Method = WebRequestMethods.Ftp.DownloadFile;
        request.Credentials = new NetworkCredential(ftpUserName, ftpPassWord);
        request.KeepAlive = false;
        request.UsePassive = false;
        FtpWebResponse response = (FtpWebResponse)request.GetResponse();
        Stream responseStream = response.GetResponseStream();
        FileStream writeStream = new FileStream(localDestnDir + "\\" + file, FileMode.Create);                
        int Length = 2048;
        Byte[] buffer = new Byte[Length];
        int bytesRead = responseStream.Read(buffer, 0, Length);
        while (bytesRead > 0)
        {
            writeStream.Write(buffer, 0, bytesRead);
            bytesRead = responseStream.Read(buffer, 0, Length);
        }
        writeStream.Close();
        response.Close();
    }
    catch (WebException wEx)
    {
        MessageBox.Show(wEx.Message, "Download Error");
    }
    catch (Exception ex)
    {
        MessageBox.Show(ex.Message, "Download Error");
    }
}

Answer 1

FtpWebRequest не имеет явной поддержки рекурсивных файловых операций (включая загрузки). Вы должны осуществить рекурсию самостоятельно:

• Список удаленного каталога
• Повторяйте записи, загружая файлы и возвращаясь в подкаталоги (перечисляя их снова и т. Д.)

Сложной задачей является выявление файлов из подкаталогов. Там нет никакого способа сделать это портативным способом с FtpWebRequest, FtpWebRequest к сожалению не поддерживает MLSD команда, которая является единственным переносимым способом получения списка каталогов с атрибутами файлов в протоколе FTP. Смотрите также Проверка, является ли объект на FTP-сервере файлом или каталогом.

Ваши варианты:

• Выполните операцию с именем файла, которая наверняка не удастся для файла и удастся для каталогов (или наоборот). Т.е. вы можете попробовать скачать "имя". Если это удается, это файл, если это не удается, это каталог.
• Возможно, вам повезет, и в вашем конкретном случае вы можете отличить файл из каталога по имени файла (то есть все ваши файлы имеют расширение, а подкаталоги - нет).
• Вы используете длинный список каталогов (LIST команда = ListDirectoryDetails метод) и попробуйте разобрать листинг для конкретного сервера. Многие FTP-серверы используют листинг в стиле *nix, где вы определяете каталог по d в самом начале записи. Но многие серверы используют другой формат. В следующем примере используется этот подход (предполагается, что формат *nix)

void DownloadFtpDirectory(string url, NetworkCredential credentials, string localPath)
{
    FtpWebRequest listRequest = (FtpWebRequest)WebRequest.Create(url);
    listRequest.Method = WebRequestMethods.Ftp.ListDirectoryDetails;
    listRequest.Credentials = credentials;

    List<string> lines = new List<string>();

    using (FtpWebResponse listResponse = (FtpWebResponse)listRequest.GetResponse())
    using (Stream listStream = listResponse.GetResponseStream())
    using (StreamReader listReader = new StreamReader(listStream))
    {
        while (!listReader.EndOfStream)
        {
            lines.Add(listReader.ReadLine());
        }
    }

    foreach (string line in lines)
    {
        string[] tokens =
            line.Split(new[] { ' ' }, 9, StringSplitOptions.RemoveEmptyEntries);
        string name = tokens[8];
        string permissions = tokens[0];

        string localFilePath = Path.Combine(localPath, name);
        string fileUrl = url + name;

        if (permissions[0] == 'd')
        {
            if (!Directory.Exists(localFilePath))
            {
                Directory.CreateDirectory(localFilePath);
            }

            DownloadFtpDirectory(fileUrl + "/", credentials, localFilePath);
        }
        else
        {
            FtpWebRequest downloadRequest = (FtpWebRequest)WebRequest.Create(fileUrl);
            downloadRequest.Method = WebRequestMethods.Ftp.DownloadFile;
            downloadRequest.Credentials = credentials;

            using (FtpWebResponse downloadResponse =
                      (FtpWebResponse)downloadRequest.GetResponse())
            using (Stream sourceStream = downloadResponse.GetResponseStream())
            using (Stream targetStream = File.Create(localFilePath))
            {
                byte[] buffer = new byte[10240];
                int read;
                while ((read = sourceStream.Read(buffer, 0, buffer.Length)) > 0)
                {
                    targetStream.Write(buffer, 0, read);
                }
            }
        }
    }
}

Используйте функцию как:

NetworkCredential credentials = new NetworkCredential("user", "mypassword");
string url = "ftp://ftp.example.com/directory/to/download/";
DownloadFtpDirectory(url, credentials, @"C:\target\directory");

---

Если вы хотите избежать проблем с разбором форматов списков каталогов для конкретного сервера, используйте стороннюю библиотеку, которая поддерживает MLSD команда и / или разбор различных LIST форматы распечатки; и рекурсивные загрузки.

Например, с помощью сборки WinSCP .NET вы можете загрузить весь каталог одним вызовом Session.GetFiles:

// Setup session options
SessionOptions sessionOptions = new SessionOptions
{
    Protocol = Protocol.Ftp,
    HostName = "ftp.example.com",
    UserName = "user",
    Password = "mypassword",
};

using (Session session = new Session())
{
    // Connect
    session.Open(sessionOptions);

    // Download files
    session.GetFiles("/directory/to/download/*", @"C:\target\directory\*").Check();
}

Внутренне WinSCP использует MLSD команда, если поддерживается сервером. Если нет, он использует LIST Команда и поддерживает десятки различных форматов листинга.

Session.GetFiles метод является рекурсивным по умолчанию.

(Я автор WinSCP)