[8.174][INFO][NONE] HTTP Proxy Memory Usage

Billybob, I have 3GB in my Astaro and I had an issue with memory usage slowly creeping up (see graph and file in earlier post).  I didn't take any process info when I rebooted only on day 3.

Interestingly with the DB out of memory it doesn't seem to be happening.  I'm going to wait one more day and change back and let it run longer.

Paul

I'll keep this in mind when i start testing my company's new standard platform.

Give ESXi a try also. The bare metal hypervisor is free and works on most standard server (intel) hardware. I am not sure if multiple processors are supported in the free version. I know multiple cores are. If you are using intel NICs etc its a breeze to run and the memory footprint is real light. 
I also like Hyper-V and I think it will be my platform of choice by next release or so.

Billybob, I have 3GB in my Astaro and I had an issue with memory usage slowly creeping up (see graph and file in earlier post).  I didn't take any process info when I rebooted only on day 3.

Interestingly with the DB out of memory it doesn't seem to be happening.  I'm going to wait one more day and change back and let it run longer.

Paul

Keep us informed. My usage is about like yours, when local content db is enabled, creeps up and up where RES is around a gig and VIRT is around 2gb after a few days. So my astaro with 2gb ram starts swapping without even enabling the IPS. 

Regards
Bill.

esxi is vmware..[[:)]]  note the tagline of hypervisor cost being free..[[:)]]

and yes you can multiple vcpu's on a vm in exsi...i did it for a while..[:)]

I'm back.... my conclusion is that this is related to having the DB in memory.  When I use Disk or None my swap doesn't continually increase.  Right now I have been running the DB in memory and swap is increasing by about 1% a day... so far it is at 7% (7 days running) and growing.  I'm going to leave it as long as I can to see if it keeps this pace.  I have 3 GB memory in my ASG and I would thing that should be enough for the proxy, IPS, and Application control... when the DB is not in memory I have lots of memory to spare.


Paul

 I have 3 GB memory in my ASG and I would think that should be enough for ...

I've heard that some years ago. Back then some guy (don't remember his name) came up with the idea that "640K should be enough for everyone".

Let me tell you a little secret from the development department: The "local content filter db" feature has been implemented to solve the problem one (yes, exactly one) of our customers experienced. His problem was, that the categorization for the webtraffic of his ~30000 client PCs/employees in that installation took to long, because of latency issues (latency of the categorization, of course - ie. connecting to the servers and waiting for a reply).

Conclusion: Unless you drive a network with that much users, just turn that feature off.

kbr, I have one customer who is "smaller" (well, much smaller) than the corp. you talk about above, but due to ISP latency issues, categorization was unusable, and the ISP is not likely to help... the local content filter DB "Saved our Bacon" (to use an American Colloquialism) ... without it we would've had one mean customer on our hands.  I hope they are still planning, at some point, to make that an official feature -- I have noted it does improve performance even on links that have a lower latency to the categorization servers.

exactly.  if you have a limited bandwidth client(i have one on slow dsl..nothing else available) the cloudy database makes the web feel like isdn.  With the mem option it is at least usable..[:)]  The mem/disk option isn't just for large installations..i would actually argue it would be detrimental(in some cases) for a large installation..but for smaller, bandwidth limited installations it is a godsend.

.... my conclusion is that this is related to having the DB in memory.l

Agreed!

...Conclusion: Unless you drive a network with that much users, just turn that feature off...

I will have to disagree with you on this kai. There is a noticeable improvement on the proxy response when running the local db even from the disk. I have a fairly decent connection and have never had any complaints about the latency but when I enable local content db, the pages load almost as if there is no proxy involved at all.

...I have noted it does improve performance even on links that have a lower latency to the categorization servers...

Bruce has it right. This feature shouldn't be swept under the rug by rationalizing that it will not be utilized or only the companies with huge user base will cause latency. I don't know about Europe but here in the US, there are plenty of crappy high speed connections being utilized for cost cutting measures. Every little bit helps and more choice is never a bad thing. If someone doesn't want to run the local db it should be their choice specially for something that astaro is already capable of doing. You guys have to be proactive on this just like the L7 categorization. Offer the service and let the customer decide.

Regards
Bill

Total agreement here.  Also as a partner and others astaro promised to put this into 8.2.  Now the backtracking has begun...interesting timing....how about keeping your word on this one Astaro?