【问题标题】:Can PowerShell use FTP to retrieve remote folder and subfolder directory data in a single transmission?PowerShell 可以使用 FTP 在一次传输中检索远程文件夹和子文件夹目录数据吗?
【发布时间】:2018-05-08 18:16:21
【问题描述】:

我有一个 PowerShell 脚本,用于检查远程位置文件的现有时间戳数据,以与本地文件进行比较。

用这个sn-p检索本地信息:

$SrcEntries = Get-ChildItem $FolderLocation -Recurse

然后我可以使用以下 sn-p 获取有关文件夹和文件的特定信息:

$Srcfolders = $SrcEntries | Where-Object{$_.PSIsContainer}
$SrcFiles = $SrcEntries | Where-Object{!$_.PSIsContainer}

当前使用这个 sn-p 检索远程信息,它为每个文件单独执行:

$Credentials = New-Object System.Net.NetworkCredential($FTPUser,$FTPPassword)
$FTPrequest = [System.Net.FtpWebRequest]::Create($RemoteFilePath)
$FTPrequest.Method = [System.Net.WebRequestMethods+FTP]::GetDateTimestamp
$FTPrequest.Credentials = $Credentials
$response = $FTPrequest.GetResponse().StatusDescription

然后解析$response 以检索远程文件的时间戳。

以与检索本地数据相同的方式检索远程数据似乎更好,即与上面的第一个 sn-p 一样在单个操作中避免多次往返远程服务器。

是否可以使用 PowerShell 在单个快速 FTP 操作中递归地获取文件夹和文件目录数据?我该怎么做?

【问题讨论】:

    标签: powershell ftp ftpwebrequest


    【解决方案1】:

    在没有任何外部库的情况下实现这一点并不容易。不幸的是,.NET Framework 和 PowerShell 都没有明确支持在 FTP 文件夹中递归列出文件。

    你必须自己实现:

    • 列出远程文件夹
    • 迭代条目,递归到子文件夹 - 再次列出它们,等等。

    第一个棘手的部分是从子文件夹中识别文件。使用 .NET 框架 (FtpWebRequest) 无法以可移植的方式做到这一点。不幸的是,.NET 框架不支持MLSD 命令,这是在 FTP 协议中检索具有文件属性的目录列表的唯一可移植方式。另见Checking if object on FTP server is file or directory

    您的选择是:

    • 对文件名执行操作,对于文件肯定会失败,而对于目录会成功(反之亦然)。 IE。您可以尝试下载“名称”。
    • 您可能很幸运,在您的特定情况下,您可以通过文件名来区分目录中的文件(即,您的所有文件都有扩展名,而子目录没有)
    • 您使用长目录列表(LIST 命令 = ListDirectoryDetails 方法)并尝试解析特定于服务器的列表。许多 FTP 服务器使用 *nix 样式的列表,您可以在其中通过条目开头的 d 标识目录。但是许多服务器使用不同的格式。以下示例使用这种方法(假设为 *nix 格式)
    function ListFtpDirectory($url, $credentials)
    {
        $listRequest = [Net.WebRequest]::Create($url)
        $listRequest.Method = [System.Net.WebRequestMethods+Ftp]::ListDirectoryDetails
        $listRequest.Credentials = $credentials
        
        $lines = New-Object System.Collections.ArrayList
    
        $listResponse = $listRequest.GetResponse()
        $listStream = $listResponse.GetResponseStream()
        $listReader = New-Object System.IO.StreamReader($listStream)
        while (!$listReader.EndOfStream)
        {
            $line = $listReader.ReadLine()
            $lines.Add($line) | Out-Null
        }
        $listReader.Dispose()
        $listStream.Dispose()
        $listResponse.Dispose()
    
        foreach ($line in $lines)
        {
            $tokens = $line.Split(" ", 9, [StringSplitOptions]::RemoveEmptyEntries)
            $name = $tokens[8]
            $permissions = $tokens[0]
    
            if ($permissions[0] -eq 'd')
            {
                Write-Host "Directory $name"
    
                $fileUrl = ($url + $name)
                ListFtpDirectory ($fileUrl + "/") $credentials
            }
            else
            {
                Write-Host "File $name"
            }
        }
    }
    

    使用如下函数:

    $credentials = New-Object System.Net.NetworkCredential("user", "mypassword") 
    $url = "ftp://ftp.example.com/directory/to/list/"
    ListFtpDirectory $url $credentials
    

    虽然上面的代码只会列出名字。由于您也需要时间戳,因此您甚至必须解析这些时间戳。这就像确定一个条目是文件夹还是文件一样复杂。

    我没有这方面的 PowerShell 代码,但请参阅我对其他类似问题的回答,其中显示了 C# 代码。翻译成 PowerShell 应该很容易:


    如果您想避免解析服务器特定目录列表格式的麻烦,请使用支持MLSD 命令和/或解析各种LIST 列表格式的第三方库。

    例如,使用WinSCP .NET assembly,您可以通过调用Session.EnumerateRemoteFiles 递归地列出整个目录:

    # Load WinSCP .NET assembly
    Add-Type -Path "WinSCPnet.dll"
    
    # Setup session options
    $sessionOptions = New-Object WinSCP.SessionOptions -Property @{
        Protocol = [WinSCP.Protocol]::Ftp
        HostName = "ftp.example.com"
        UserName = "user"
        Password = "mypassword"
    }
    
    $session = New-Object WinSCP.Session
    
    try
    {
        # Connect
        $session.Open($sessionOptions)
    
        # Download files
        $options =
            [WinSCP.EnumerationOptions]::EnumerateDirectories -bor
            [WinSCP.EnumerationOptions]::AllDirectories
        $fileInfos = $session.EnumerateRemoteFiles(
            "/directory/to/list", $Null, $options)
        foreach ($fileInfo in $fileInfos)
        {
            Write-Host $fileInfo.FullName
        }
    }
    finally
    {
        # Disconnect, clean up
        $session.Dispose()
    }    
    

    不仅代码更简单、更健壮且独立于平台。它还使所有其他文件属性(大小、修改时间、权限、所有权)都可以通过RemoteFileInfo class 轻松获得。

    如果服务器支持,WinSCP 在内部使用MLSD 命令。如果没有,它使用LIST 命令并支持数十种不同的列表格式。


    虽然您的目标似乎是比较本地和远程时间戳以同步文件夹。

    WinSCP .NET 程序集可以使用 Session.SynchronizeDirectories 进行一次调用。

    您可能还会发现这些问题(由我回答)很有用:

    (我是 WinSCP 的作者)

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2016-09-02
      • 2012-05-11
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2013-08-20
      相关资源
      最近更新 更多