ruby - 有没有更好的方法在下载之前使用 SCP 检查文件大小?

标签 ruby scp net-sftp

我有这段代码可以从远程计算机下载文件,但我想将其限制为小于 5MB 的文件。

到目前为止,代码有效。但是有没有更好的方法在下载之前检查文件大小?

Net::SCP.start(hname, uname, :password => pw ) do|scp|
fsize=scp.download!("#{remdir}/#{filname}").size;puts fsize
  scp.download!("#{remdir}/#{filname}",  "#{filname}") do |ch, name, sent, total|
  File.open(lfile, 'a'){ |f| f.puts "#{name}: #{(sent.to_f * 100 / total.to_f).to_i}% complete"}
  #puts "Sending : #{(sent.to_f * 100 / total.to_f).to_i}% complete"
  #puts "#{name}: #{sent}/#{total}"
  #print "\r#{name}: #{(sent.to_f * 100 / total.to_f).to_i}%"
  end
end

如果我将其用于大文件,这会导致任何问题吗?

fsize=scp.download!("#{remdir}/#{filname}").size;puts fsize

此页面表示文件将以字符串形式返回: http://ruby.about.com/od/ssh/ss/netscp_6.htm

更新: 我也尝试过SFTP。首先它不适用于文件的完整路径。其次,它没有达到我想要的效果。使用 scp.download!().size 也是如此。我知道我下载了两次:(

require 'net/sftp'
# did not take full path "/user/myname/filename"
remote_path="somefile.txt"
 Net::SFTP.start(hname, uname, :password => pw) do |sftp|
   attrs = sftp.stat!("rome_desc.txt") ; puts attrs  # gave   #   ☼     ↨?%  (?  '→  ??Q{ ?Qt;?
     sftp.stat!(remote_path) do |response| puts response   #returned no such file (2)
 # but did not do below upload operation.
      unless response.ok?
    sftp.upload!("#{filname}", remdir)
  end
end
end

更新:2个解决方案 根据以下用户提供的评论并在网上搜索后找到了解决方案。

    Net::SFTP.start(hname, uname, :password => pw) do |sftp| #, :verbose => Logger::DEBUG
        sftp.dir.glob("./#{remdir}", "#{filname}") do |entry| p entry.name
        file_size=entry.attributes.size;   file_size = '%.2f' % (("#{file_size}").to_f / 2**20)    ;  File.open(lfile, 'a'){ |f| f.puts "File size is #{file_size} mb"}
            if file_size < file_size_param then
                sftp.download!("#{remdir}/#{filname}", filname)
            else
            File.open(lfile, 'a'){ |f| f.puts "File size is greater than #{file_size_param} mb. so can not Download File"}
            end
        end
    end

使用.attributes.size获取文件大小,通过检查文件大小进行下载操作。

 sftp.dir.glob("./#{remdir}", "#{filname}") do |entry| p entry.name
        file_size=entry.attributes.size

最佳答案

Does this cause any problem if I am use it for large files?

我们不知道,因为我们不知道您的互联网连接速度有多快、您有多少 RAM、您下载文件的主机的管道速度有多快?

基本上,您会读取文件两次,一次读入内存以查看它有多大,然后再次读取它是否满足您的要求,这看起来真的...很愚蠢。

您正在将正在读取的主机以及网络连接上的流量加倍,并且,如果文件大于本地计算机上的 RAM,它就会变得疯狂。

正如 Darshan 所说,看看使用 Net::SFTP。它使您能够在尝试加载文件之前查询文件的大小,而无需将整个文件拉下来。使用起来有点复杂,但这种复杂性转化为灵活性。


"/user/myname/filename"

(S)FTP 可能不一定有可以看到该文件的基本路径。要探测系统并找出答案,请通过 SFTP 连接询问系统,当您首次登录时其当前目录是什么,然后使用 Net::STFP 文档中的示例询问它可以看到的文件:

sftp.dir.glob("/base/path", "*/**/*.rb") do |entry|
  p entry.name
end

这将递归地查看“/base/path”层次结构,搜索所有“*.rb”文件。

关于ruby - 有没有更好的方法在下载之前使用 SCP 检查文件大小?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/16246368/

相关文章:

linux - 如果目标文件夹不存在,scp 会创建它吗

要求输入密码的 Python 子进程

networking - 如何使用 Vim 使用 SCP 跨不同子网编辑文件?

Ruby Net-SFTP 无响应

ruby - 在Nokogiri中同时访问两个元素

ruby - 重载 Ruby 的 [...] 数组创建速记

ruby-on-rails - US-ASCII 中的无效字节序列(ArgumentError),没有任何帮助

ruby - Net::SFTP::Session 无法运行 stat,显然有一个 Nil channel

ruby 网 sftp : fastest way to get list of files

ruby - 如何使用 Ruby 和 eventmachine 登录?