Guest User!

You are not Sophos Staff.

[7.480][BUG][FIXED] Large downloads via Proxy are cut off prematurely

I think this may be a rehash of an earlier bug report (from version 7.460, I think):

When I attempt to download large files via HTTP, say, a 900MB ISO file... I get maybe 80MB or so of the file (it varies somewhat) before IE or Firefox saves the file, claiming it's done... but it's not, the whole file did not download.  This is with the HTTP proxy enabled, running in transparent mode; THe AV settings are set to skip scanning a file over 100MB in size, so the AV should not be the problem -- the typical Astaro Download page is not displayed, the download just starts, as it should with it set this way.  Downloads from the same sites on 7.404 worked fine.  I checked all the logs (I mean everything).  The only event I can see that coincides from a time standpoint with the downloads dying is the up2date daemon checking for a pattern (or system, can't remember now) update... and there wasn't one available, so it wasn't like a lot of bandwidth was consumed, etc.  This sounds kind of like what I recall reading about earlier.

I'll post some log entries up here when I get time to pull them from the test system I was using.
Parents Reply Children
  • Hi,
    I have started a download of the latest ISO, it failed at 46mb. The audiostreaming did not fail which was a the usual indication of a drop.

    I will start another and see what happens.

    Ian M
  • Very interesting. I download astaro ISO via http proxy (transparent) without any problem and its fairly large 500+M. I will try to download some other large files and see.[;)]


    I will say it is intermittent, but I can generally get it to happen 80% of the time or so. I've been too busy to really push it hard to get the numbers exactly right... but it does fail.

    CTO, Convergent Information Security Solutions, LLC

    https://www.convergesecurity.com

    Advice given as posted on this forum does not construe a support relationship or other relationship with Convergent Information Security Solutions, LLC or its subsidiaries.  Use the advice given at your own risk.

  • Hi Bruce,
    my tests this morning.
    ISO from Europe failed at 46mb
    ISO from US failed at 96mb
    Disabled IPS and the ISO was way over 300mb when I left it to come to work.[:)]

    Regards
    Ian M

    ISO downloaded successfully so far. Have to burn it on another PC this machine has a dead burner.

    No entries in the IPS log.
  • Hi,
    more testing, inconclusive results.
    Vista 64 
    IPS enabled download 7.480 ISO failed.
    IPS disabled, webadmin open monitoring download speed, ISO failed
    IPS disabled, ISO downloaded at time very slowly 5kB/s. Starting and stopping firefox and itunes caused the download speed to increase up to 60kB/s and then slowly drop again.

    Windows 7
    IPS enabled, 7.480 ISO downloaded. Opened and closed webadmin on the Vista 64, no affect on Windows 7 download. Speed varied from 50kB/s to 150kB/s and starting and stopping web browsing had an effect.

    There were other users on the ASG at the time.

    Best I can say is downloading while using webadmin seems to cause dropouts. I have noticed this before.[:)]

    Ian M
  • Ian, what site are you using for downloading http  astro.de or astaro.com? From astaro.com I can download at full 10M (my line speed) with IPS on and proxy active.
    I do have to agree though that the proxy doesn't seem as snappy as it was in 7.470. Maybe just my imagination but the last version of http proxy seemed the stablest with least problems at least for me.

    This could be related to more aggressive IPS also since it was toned down quite a bit in 7.470. But then you don't see any difference with IPS on or off in your testing so I don't know[:S]

    Maybe bruce can narrow it down some more.
    Regards
    Bill.
  • Hi billybob,
    I was using both ftp sites .de and .com

    While trying out various boxes as ASGs the low power version, I found I can't get a stable box from startup until I disable IPS and wait for a couple of hours before re-enabling IPS.

    My quad core 9950 doesn't have any problems when started from cold.

    I haven't tried the download without using the proxy. Something for later today.

    Ian M
  • Hi ,

    smiler issues i am facing @ https://community.sophos.com/products/unified-threat-management/astaroorg/f/98/t/68420
    but on server i was able to download 500+ mb with wget but there was isp problem and when i tryed wget -c it give a similer problem

    Thanks
  • Hi folks,
    performed series tests tonight without the http proxy and with IPS enabled.
    The ASG I performed these tests on is the AMD x2 be2300 version with 2 Intel NICs. Yesterday's tests were on the Atom 330 with hyperthreading enabled.

    Used the W 7 64 bit PC for the downloads.

    Downloaded the full ISO from one Astaro site and the up2date package from the other at the same time. Audio streaming running on Vista 64 with webadmin open and displaying live packet filter page.

    ISO package speeds varied from 50kB/s to 410kB/s.
    up2date package speeds varied from 45kB/s to 150kB/s.
    No dropouts.
    VoIP was not very good during this trial. I have QOS enabled on the external interface for both VoIP phones (ATAs). I was wondering do I enable QOS on the netgear switch because the internal interface uses VLANs?

    Regards
    Ian M
  • My failures have only happened when the proxy is enabled... IPS doesn't show anything in the logs.

    CTO, Convergent Information Security Solutions, LLC

    https://www.convergesecurity.com

    Advice given as posted on this forum does not construe a support relationship or other relationship with Convergent Information Security Solutions, LLC or its subsidiaries.  Use the advice given at your own risk.

  • Did further testing over the weekend; failures only occur when the HTTP Proxy is enabled.   I downloaded 3GB of data overnight with the proxy disabled, no problems.  Using the same download site (Not Astaro, another vendor for a DLP system we're evaluating) with proxy enabled, invariably failed at 90MB or so.

    CTO, Convergent Information Security Solutions, LLC

    https://www.convergesecurity.com

    Advice given as posted on this forum does not construe a support relationship or other relationship with Convergent Information Security Solutions, LLC or its subsidiaries.  Use the advice given at your own risk.