<html>
<head>
<meta http-equiv="Content-Type" content="text/html; charset=utf-8">
</head>
<body style="word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space; color: rgb(0, 0, 0); font-size: 14px; font-family: Calibri, sans-serif;">
<div>All, is it possible to configure the number and size of log files in the output/input directory?</div>
<div><br>
</div>
<div>I’m finding my running instance of hindsight filling up the ouput/input directory will a large number of files (GBs in size) which is causing the VMs I’m using to run out of disk space.</div>
<div><br>
</div>
<div>I’ve pulled down the latest hindsight code and have it deployed with the following configuration settings (thanks in advance for any help):</div>
<div><br>
</div>
<div>
<pre style="background-color: rgb(255, 255, 255); font-family: Menlo; font-size: 9pt;">output_path             = "output"<br>-- output_size             = 1024 * 1024 * 1024<br>output_size             = 64 * 1024 * 1024<br>sandbox_load_path       = "load" -- enable dynamic loading<br>sandbox_run_path        = "run"<br>-- sandbox_install_path    = "/usr/share/luasandbox/sandboxes/heka" -- default<br><br>--[[ redhat --]]<br>analysis_threads        = 1<br>analysis_lua_path        = "/lua_sandbox_extensions/release/install/lib/luasandbox/modules/?.lua"<br>analysis_lua_cpath       = "/lua_sandbox_extensions/release/install/lib/luasandbox/modules/?.so"<br>io_lua_path             = analysis_lua_path .. ";/lua_sandbox_extensions/heka/io_modules/?.lua;/thota/run/modules/?.lua;/lua_sandbox_extensions/syslog/io_modules/?.lua;/lua_sandbox_extensions/syslog/modules/?.lua;/lua_sandbox_extensions/heka/modules/?.lua;/lua_sandbox_extensions/syslog/io_modules/?.lua;/lua_sandbox_extensions/syslog/modules/?.lua;/lua_sandbox_extensions/release/install/lib/luasandbox/io_modules/?.lua"<br>io_lua_cpath            = analysis_lua_cpath .. ";/lua_sandbox_extensions/release/kafka/?.so;/lua_sandbox_extensions/release/install/lib/luasandbox/io_modules/?.so"<br><br>--[[ debian<br>analysis_threads        = 1<br>analysis_lua_path       = "/usr/lib/luasandbox/modules/?.lua"<br>analysis_lua_cpath      = "/usr/lib/luasandbox/modules/?.so"<br>io_lua_path             = analysis_lua_path ..  ";/usr/lib/luasandbox/io_modules/?.lua"<br>io_lua_cpath            = analysis_lua_cpath .. ";/usr/lib/luasandbox/io_modules/?.so"<br> --]]<br><br>max_message_size        = 8e6 -- default<br>backpressure            = 0 -- default<br>backpressure_disk_free  = 4 -- default<br>-- hostname                = -- default gethostname()<br><br>analysis_defaults = {<br>--    output_limit          = 1024 * 64,        -- default<br>--    memory_limit          = 1024 * 1024 * 8,  -- default<br>--    instruction_limit     = 1000000,          -- default<br>--    preserve_data         = false,            -- default<br>--    restricted_headers    = false,            -- default<br>    ticker_interval       = 60,<br>--    shutdown_on_terminate = false,            -- default<br>    }<br><br>input_defaults = {<br>--    output_limit          = 1024 * 64,        -- default<br>--    memory_limit          = 1024 * 1024 * 8,  -- default<br>    instruction_limit     = 0,<br>--    preserve_data         = false,            -- default<br>--    restricted_headers    = true,             -- default<br>--    ticker_interval       = 0,                -- default<br>--    shutdown_on_terminate = false,            -- default<br>    }<br><br>output_defaults = {<br>--    output_limit          = 1024 * 64,        -- default<br>--    memory_limit          = 1024 * 1024 * 8,  -- default<br>--    instruction_limit     = 1000000,          -- default<br>--    preserve_data         = false,            -- default<br>--    restricted_headers    = false,            -- default<br>    ticker_interval       = 60,              <br>--    shutdown_on_terminate = false,            -- default<br>--    remove_checkpoints_on_terminate = false,  -- default<br>    }<br></pre>
</div>
<div>
<div id="MAC_OUTLOOK_SIGNATURE"></div>
</div>
</body>
</html>