PowerShell 能否使用 FTP 在一次传输中检索远程文件夹和子文件夹目录数据?

2023-12-19

我有一个 PowerShell 脚本,用于检查远程位置文件的现有时间戳数据,以便与本地文件进行比较。

使用以下代码片段检索本地信息:

$SrcEntries = Get-ChildItem $FolderLocation -Recurse

然后,我可以使用以下代码片段获取有关文件夹和文件的具体信息:

$Srcfolders = $SrcEntries | Where-Object{$_.PSIsContainer}
$SrcFiles = $SrcEntries | Where-Object{!$_.PSIsContainer}

当前使用此代码片段检索远程信息,该代码片段针对每个文件单独执行:

$Credentials = New-Object System.Net.NetworkCredential($FTPUser,$FTPPassword)
$FTPrequest = [System.Net.FtpWebRequest]::Create($RemoteFilePath)
$FTPrequest.Method = [System.Net.WebRequestMethods+FTP]::GetDateTimestamp
$FTPrequest.Credentials = $Credentials
$response = $FTPrequest.GetResponse().StatusDescription

The $response然后解析以检索远程文件的时间戳。

最好以与检索本地数据相同的方式检索远程数据,即在与上面第一个片段相同的单个操作中,以避免多次往返远程服务器。

是否可以使用 PowerShell 在单个快速 FTP 操作中递归获取文件夹和文件目录数据?我该怎么做呢?


如果没有任何外部库,实现这一点并不容易。不幸的是,.NET Framework 和 PowerShell 都没有明确支持在 FTP 文件夹中递归列出文件。

你必须自己实现:

  • 列出远程文件夹
  • 迭代条目,递归到子文件夹 - 再次列出它们,等等。

第一个棘手的部分是识别子文件夹中的文件。 .NET 框架无法以可移植的方式做到这一点(FtpWebRequest)。不幸的是.NET框架不支持MLSD命令,这是在 FTP 协议中检索带有文件属性的目录列表的唯一可移植方法。也可以看看检查 FTP 服务器上的对象是文件还是目录 https://stackoverflow.com/q/36895021/850848.

您的选择是:

  • 对文件名执行的操作对于文件肯定会失败,而对于目录则成功(反之亦然)。 IE。你可以尝试下载“名字”。
  • 您可能很幸运,在您的特定情况下,您可以通过文件名区分文件和目录(即所有文件都有扩展名,而子目录没有)
  • 您使用长目录列表(LIST命令=ListDirectoryDetails方法)并尝试解析特定于服务器的列表。许多 FTP 服务器使用 *nix 样式的列表,您可以通过d在条目的最开始。但许多服务器使用不同的格式。以下示例使用此方法(假设为 *nix 格式)
function ListFtpDirectory($url, $credentials)
{
    $listRequest = [Net.WebRequest]::Create($url)
    $listRequest.Method = [System.Net.WebRequestMethods+Ftp]::ListDirectoryDetails
    $listRequest.Credentials = $credentials
    
    $lines = New-Object System.Collections.ArrayList

    $listResponse = $listRequest.GetResponse()
    $listStream = $listResponse.GetResponseStream()
    $listReader = New-Object System.IO.StreamReader($listStream)
    while (!$listReader.EndOfStream)
    {
        $line = $listReader.ReadLine()
        $lines.Add($line) | Out-Null
    }
    $listReader.Dispose()
    $listStream.Dispose()
    $listResponse.Dispose()

    foreach ($line in $lines)
    {
        $tokens = $line.Split(" ", 9, [StringSplitOptions]::RemoveEmptyEntries)
        $name = $tokens[8]
        $permissions = $tokens[0]

        if ($permissions[0] -eq 'd')
        {
            Write-Host "Directory $name"

            $fileUrl = ($url + $name)
            ListFtpDirectory ($fileUrl + "/") $credentials
        }
        else
        {
            Write-Host "File $name"
        }
    }
}

使用如下函数:

$credentials = New-Object System.Net.NetworkCredential("user", "mypassword") 
$url = "ftp://ftp.example.com/directory/to/list/"
ListFtpDirectory $url $credentials

虽然上面的代码只会列出名称。由于您也需要时间戳,因此您甚至必须解析这些时间戳。这与确定条目是文件夹还是文件一样复杂。

我没有相应的 PowerShell 代码,但请参阅我对其他类似问题的回答,其中显示了 C# 代码。翻译成 PowerShell 应该很容易:

  • 检索文件的创建日期 (FTP) https://stackoverflow.com/q/4454281/850848#30306029
  • 解析 FtpWebRequest ListDirectoryDe​​tails 行 https://stackoverflow.com/q/1013486/850848#40045894
  • 用于解析 WebRequestMethods.Ftp.ListDirectoryDe​​tails FTP 响应的 C# 类 https://stackoverflow.com/q/7060983/850848#39771146

如果您想避免解析特定于服务器的目录列表格式的麻烦,请使用支持MLSD命令和/或解析各种LIST列表格式。

例如与WinSCP .NET 程序集 https://winscp.net/eng/docs/library您可以通过一次调用递归地列出整个目录Session.EnumerateRemoteFiles https://winscp.net/eng/docs/library_session_enumerateremotefiles:

# Load WinSCP .NET assembly
Add-Type -Path "WinSCPnet.dll"

# Setup session options
$sessionOptions = New-Object WinSCP.SessionOptions -Property @{
    Protocol = [WinSCP.Protocol]::Ftp
    HostName = "ftp.example.com"
    UserName = "user"
    Password = "mypassword"
}

$session = New-Object WinSCP.Session

try
{
    # Connect
    $session.Open($sessionOptions)

    # Download files
    $options =
        [WinSCP.EnumerationOptions]::EnumerateDirectories -bor
        [WinSCP.EnumerationOptions]::AllDirectories
    $fileInfos = $session.EnumerateRemoteFiles(
        "/directory/to/list", $Null, $options)
    foreach ($fileInfo in $fileInfos)
    {
        Write-Host $fileInfo.FullName
    }
}
finally
{
    # Disconnect, clean up
    $session.Dispose()
}    

不仅代码更简单、更健壮并且与平台无关。它还使所有其他文件属性(大小、修改时间、权限、所有权)可以通过RemoteFileInfo class https://winscp.net/eng/docs/library_remotefileinfo.

在内部,WinSCP 使用MLSD命令(如果服务器支持)。如果没有,则使用LIST命令并支持数十种不同的列表格式。


尽管您的目标似乎是比较本地和远程时间戳以同步文件夹。

WinSCP .NET 程序集可以使用以下命令通过一次调用来完成此操作Session.SynchronizeDirectories https://winscp.net/eng/docs/library_session_synchronizedirectories.

您可能还会发现这些问题(由我回答)很有用:

  • 如何在 PowerShell 中比较本地文件与 FTP 服务器上的文件的年龄并下载远程复制是否较新 https://stackoverflow.com/q/31306426/850848
  • 如何在 PowerShell 中查询 FTP 服务器上的文件以确定是否需要上传? https://stackoverflow.com/q/46838302/850848

(我是WinSCP的作者)

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

PowerShell 能否使用 FTP 在一次传输中检索远程文件夹和子文件夹目录数据? 的相关文章

随机推荐