Nagios Logging - Snapshot scheduler

[songviet]

Hi team,

I am in progress creating Snapshot and maintenance, but for some reason, snapshot does not created and not running well with snapshots_maintenance (Command Subsystem).

I ran below and does this below error message may cause?
>tail -f /usr/local/nagioslogserver/var/jobs.log
2020-07-10 09:19:24,253 ERROR Unable to find all snapshots in repository: Snapshot Repository

[songviet]

This is full rows error logs what I found. The "/mnt/snapshot_repository/indices" is currently BLANK.

Code: Select all

-----
 in <module>
    sys.exit(main())
  File "/usr/local/lib/python2.7/dist-packages/curator/curator.py", line 5, in main
    cli( obj={ "filters": [] } )
  File "/usr/local/lib/python2.7/dist-packages/click/core.py", line 829, in __call__
    return self.main(*args, **kwargs)
  File "/usr/local/lib/python2.7/dist-packages/click/core.py", line 782, in main
    rv = self.invoke(ctx)
  File "/usr/local/lib/python2.7/dist-packages/click/core.py", line 1259, in invoke
    return _process_result(sub_ctx.command.invoke(sub_ctx))
  File "/usr/local/lib/python2.7/dist-packages/click/core.py", line 1259, in invoke
    return _process_result(sub_ctx.command.invoke(sub_ctx))
  File "/usr/local/lib/python2.7/dist-packages/click/core.py", line 1066, in invoke
    return ctx.invoke(self.callback, **ctx.params)
  File "/usr/local/lib/python2.7/dist-packages/click/core.py", line 610, in invoke
    return callback(*args, **kwargs)
  File "/usr/local/lib/python2.7/dist-packages/click/decorators.py", line 21, in new_func
    return f(get_current_context(), *args, **kwargs)
  File "/usr/local/lib/python2.7/dist-packages/curator/cli/index_selection.py", line 167, in indices
    retval = do_command(client, ctx.parent.info_name, working_list, ctx.parent.params, master_timeout)
  File "/usr/local/lib/python2.7/dist-packages/curator/cli/utils.py", line 250, in do_command
    skip_repo_validation=params['skip_repo_validation'],
  File "/usr/local/lib/python2.7/dist-packages/curator/api/snapshot.py", line 72, in create_snapshot
    if name in all_snaps:
TypeError: argument of type 'bool' is not iterable
-----
Running cmd: /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository" --ignore_unavailable indices --older-than 1 --time-unit days --timestring %Y.%m.%d
Return: 1
2020-07-10 09:18:01,349 INFO      Job starting: snapshot indices
2020-07-10 09:18:01,349 WARNING   Overriding default connection timeout.  New timeout: 21600
2020-07-10 09:18:01,366 INFO      Action snapshot will be performed on the following indices: [u'logstash-2020.03.09', u'logstash-2020.03.11', u'logstash-2020.03.12', u'logstash-2020.03.13', u'logstash-2020.03.14', u'logstash-2020.03.15', u'logstash-2020.03.16', u'logstash-2020.03.17', u'logstash-2020.03.18', u'logstash-2020.03.19', u'logstash-2020.03.20', u'logstash-2020.03.21', u'logstash-2020.03.22', u'logstash-2020.03.23', u'logstash-2020.03.24', u'logstash-2020.03.25', u'logstash-2020.03.26', u'logstash-2020.03.27', u'logstash-2020.03.28', u'logstash-2020.03.29', u'logstash-2020.03.30', u'logstash-2020.03.31', u'logstash-2020.04.01', u'logstash-2020.04.02', u'logstash-2020.04.03', u'logstash-2020.04.04', u'logstash-2020.04.05', u'logstash-2020.04.06', u'logstash-2020.04.07', u'logstash-2020.04.08', u'logstash-2020.04.09', u'logstash-2020.04.10', u'logstash-2020.04.11', u'logstash-2020.04.12', u'logstash-2020.04.13', u'logstash-2020.04.14', u'logstash-2020.04.15', u'logstash-2020.04.16', u'logstash-2020.04.17', u'logstash-2020.04.18', u'logstash-2020.04.19', u'logstash-2020.04.20', u'logstash-2020.04.21', u'logstash-2020.04.22', u'logstash-2020.04.23', u'logstash-2020.04.24', u'logstash-2020.04.25', u'logstash-2020.04.26', u'logstash-2020.04.27', u'logstash-2020.04.28', u'logstash-2020.04.29', u'logstash-2020.04.30', u'logstash-2020.05.01', u'logstash-2020.05.02', u'logstash-2020.05.03', u'logstash-2020.05.04', u'logstash-2020.05.05', u'logstash-2020.05.06', u'logstash-2020.05.07', u'logstash-2020.05.08', u'logstash-2020.05.09', u'logstash-2020.05.10', u'logstash-2020.05.11', u'logstash-2020.05.12', u'logstash-2020.05.13', u'logstash-2020.05.14', u'logstash-2020.05.15', u'logstash-2020.05.16', u'logstash-2020.05.17', u'logstash-2020.05.18', u'logstash-2020.05.19', u'logstash-2020.05.20', u'logstash-2020.05.21', u'logstash-2020.05.22', u'logstash-2020.05.23', u'logstash-2020.05.24', u'logstash-2020.05.25', u'logstash-2020.05.26', u'logstash-2020.05.27', u'logstash-2020.05.28', u'logstash-2020.05.29', u'logstash-2020.05.30', u'logstash-2020.05.31', u'logstash-2020.06.01', u'logstash-2020.06.02', u'logstash-2020.06.03', u'logstash-2020.06.04', u'logstash-2020.06.05', u'logstash-2020.06.06', u'logstash-2020.06.07', u'logstash-2020.06.08', u'logstash-2020.06.09', u'logstash-2020.06.10', u'logstash-2020.06.11', u'logstash-2020.06.12', u'logstash-2020.06.13', u'logstash-2020.06.14', u'logstash-2020.06.15', u'logstash-2020.06.16', u'logstash-2020.06.17', u'logstash-2020.06.18', u'logstash-2020.06.19', u'logstash-2020.06.20', u'logstash-2020.06.21', u'logstash-2020.06.22', u'logstash-2020.06.23', u'logstash-2020.06.24', u'logstash-2020.06.25', u'logstash-2020.06.26', u'logstash-2020.06.27', u'logstash-2020.06.28', u'logstash-2020.06.29', u'logstash-2020.06.30', u'logstash-2020.07.01', u'logstash-2020.07.02', u'logstash-2020.07.03', u'logstash-2020.07.04', u'logstash-2020.07.05', u'logstash-2020.07.06', u'logstash-2020.07.07', u'logstash-2020.07.08', u'logstash-2020.07.09']
2020-07-10 09:19:22,088 INFO      Snapshot name: curator-20200710021922
2020-07-10 09:19:24,253 ERROR     Unable to find all snapshots in repository: Snapshot Repository
-----
-----
Running cmd: /usr/local/nagioslogserver/scripts/curator.sh delete snapshots --older-than 720 --time-unit days --timestring %Y%m%d --repository "Snapshot Repository"
Return: 0
2020-07-10 09:19:24,375 INFO      Job starting: delete snapshots
2020-07-10 09:19:26,073 ERROR     Unable to find all snapshots in repository: Snapshot Repository
2020-07-10 09:19:26,073 ERROR     No snapshots found in Elasticsearch.
No snapshots found in Elasticsearch.
-----

[cdienger]

Please provide the output of:

Code: Select all

ls -alh /mnt/snapshot_repository/

[songviet]

Hi all,

I've created new another repo instead, contents pulled to shared folder successfully.

I am concerning why on Admin Web UI, it's showing "Most Recent State" is FAILED at <nagios_IP>/nagioslogserver/admin/snapshots? Does there something wrong?

2 attachments FYI (settings and Snapshots tab UI)

[cdienger]

Run the command directly on the XI command line and let me know the results:

Code: Select all

/usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository" --ignore_unavailable indices --older-than 1 --time-unit days --timestring %Y.%m.%d

[songviet]

Hi,
Here is result. I ran it on primary cluster. How can I do next?

Code: Select all

sysadm@epselog01:~$ sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 1 --time-unit days --timestring %Y.%m.%d
[sudo] password for sysadm:
2020-07-14 01:03:57,077 INFO      Job starting: snapshot indices
2020-07-14 01:03:57,077 WARNING   Overriding default connection timeout.  New timeout: 21600
2020-07-14 01:03:57,098 INFO      Action snapshot will be performed on the following indices: [u'logstash-2020.03.09', u'logstash-2020.03.11', u'logstash-2020.03.12', u'logstash-2020.03.13', u'logstash-2020.03.14', u'logstash-2020.03.15', u'logstash-2020.03.16', u'logstash-2020.03.17', u'logstash-2020.03.18', u'logstash-2020.03.19', u'logstash-2020.03.20', u'logstash-2020.03.21', u'logstash-2020.03.22', u'logstash-2020.03.23', u'logstash-2020.03.24', u'logstash-2020.03.25', u'logstash-2020.03.26', u'logstash-2020.03.27', u'logstash-2020.03.28', u'logstash-2020.03.29', u'logstash-2020.03.30', u'logstash-2020.03.31', u'logstash-2020.04.01', u'logstash-2020.04.02', u'logstash-2020.04.03', u'logstash-2020.04.04', u'logstash-2020.04.05', u'logstash-2020.04.06', u'logstash-2020.04.07', u'logstash-2020.04.08', u'logstash-2020.04.09', u'logstash-2020.04.10', u'logstash-2020.04.11', u'logstash-2020.04.12', u'logstash-2020.04.13', u'logstash-2020.04.14', u'logstash-2020.04.15', u'logstash-2020.04.16', u'logstash-2020.04.17', u'logstash-2020.04.18', u'logstash-2020.04.19', u'logstash-2020.04.20', u'logstash-2020.04.21', u'logstash-2020.04.22', u'logstash-2020.04.23', u'logstash-2020.04.24', u'logstash-2020.04.25', u'logstash-2020.04.26', u'logstash-2020.04.27', u'logstash-2020.04.28', u'logstash-2020.04.29', u'logstash-2020.04.30', u'logstash-2020.05.01', u'logstash-2020.05.02', u'logstash-2020.05.03', u'logstash-2020.05.04', u'logstash-2020.05.05', u'logstash-2020.05.06', u'logstash-2020.05.07', u'logstash-2020.05.08', u'logstash-2020.05.09', u'logstash-2020.05.10', u'logstash-2020.05.11', u'logstash-2020.05.12', u'logstash-2020.05.13', u'logstash-2020.05.14', u'logstash-2020.05.15', u'logstash-2020.05.16', u'logstash-2020.05.17', u'logstash-2020.05.18', u'logstash-2020.05.19', u'logstash-2020.05.20', u'logstash-2020.05.21', u'logstash-2020.05.22', u'logstash-2020.05.23', u'logstash-2020.05.24', u'logstash-2020.05.25', u'logstash-2020.05.26', u'logstash-2020.05.27', u'logstash-2020.05.28', u'logstash-2020.05.29', u'logstash-2020.05.30', u'logstash-2020.05.31', u'logstash-2020.06.01', u'logstash-2020.06.02', u'logstash-2020.06.03', u'logstash-2020.06.04', u'logstash-2020.06.05', u'logstash-2020.06.06', u'logstash-2020.06.07', u'logstash-2020.06.08', u'logstash-2020.06.09', u'logstash-2020.06.10', u'logstash-2020.06.11', u'logstash-2020.06.12', u'logstash-2020.06.13', u'logstash-2020.06.14', u'logstash-2020.06.15', u'logstash-2020.06.16', u'logstash-2020.06.17', u'logstash-2020.06.18', u'logstash-2020.06.19', u'logstash-2020.06.20', u'logstash-2020.06.21', u'logstash-2020.06.22', u'logstash-2020.06.23', u'logstash-2020.06.24', u'logstash-2020.06.25', u'logstash-2020.06.26', u'logstash-2020.06.27', u'logstash-2020.06.28', u'logstash-2020.06.29', u'logstash-2020.06.30', u'logstash-2020.07.01', u'logstash-2020.07.02', u'logstash-2020.07.03', u'logstash-2020.07.04', u'logstash-2020.07.05', u'logstash-2020.07.06', u'logstash-2020.07.07', u'logstash-2020.07.08', u'logstash-2020.07.09', u'logstash-2020.07.10', u'logstash-2020.07.11', u'logstash-2020.07.12', u'logstash-2020.07.13']



2020-07-14 01:04:31,759 INFO      Snapshot name: curator-20200714010431
2020-07-14 01:04:35,937 ERROR     Snapshot FAILED completed with state: FAILED
2020-07-14 01:04:35,937 WARNING   Job did not complete successfully.

[cdienger]

Try running:

Code: Select all

sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 90 --time-unit days --timestring %Y.%m.%d

and if that works you can lower the number:

Code: Select all

sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 60 --time-unit days --timestring %Y.%m.%d
sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 30 --time-unit days --timestring %Y.%m.%d
sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 1 --time-unit days --timestring %Y.%m.%d

[songviet]

Hi,

I tried to run with "--older-than 90" and "--older-than 60". Returned No indices provided.

Code: Select all

sysadm@epselog01:~$ sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 90 --time-unit days --timestring %Y.%m.%d
[sudo] password for sysadm:
2020-07-15 02:26:13,266 INFO      Job starting: snapshot indices
2020-07-15 02:26:13,267 WARNING   Overriding default connection timeout.  New timeout: 21600
2020-07-15 02:26:13,278 INFO      Action snapshot will be performed on the following indices: [u'logstash-2020.03.09', u'logstash-2020.03.11', u'logstash-2020.03.12', u'logstash-2020.03.13', u'logstash-2020.03.14', u'logstash-2020.03.15', u'logstash-2020.03.16', u'logstash-2020.03.17', u'logstash-2020.03.18', u'logstash-2020.03.19', u'logstash-2020.03.20', u'logstash-2020.03.21', u'logstash-2020.03.22', u'logstash-2020.03.23', u'logstash-2020.03.24', u'logstash-2020.03.25', u'logstash-2020.03.26', u'logstash-2020.03.27', u'logstash-2020.03.28', u'logstash-2020.03.29', u'logstash-2020.03.30', u'logstash-2020.03.31', u'logstash-2020.04.01', u'logstash-2020.04.02', u'logstash-2020.04.03', u'logstash-2020.04.04', u'logstash-2020.04.05', u'logstash-2020.04.06', u'logstash-2020.04.07', u'logstash-2020.04.08', u'logstash-2020.04.09', u'logstash-2020.04.10', u'logstash-2020.04.11', u'logstash-2020.04.12', u'logstash-2020.04.13', u'logstash-2020.04.14', u'logstash-2020.04.15', u'logstash-2020.04.16']
2020-07-15 02:26:24,250 ERROR     No indices provided.
2020-07-15 02:26:24,250 WARNING   Job did not complete successfully.
sysadm@epselog01:~$ sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 60 --time-unit days --timestring %Y.%m.%d
2020-07-15 02:27:03,181 INFO      Job starting: snapshot indices
2020-07-15 02:27:03,181 WARNING   Overriding default connection timeout.  New timeout: 21600
2020-07-15 02:27:03,192 INFO      Action snapshot will be performed on the following indices: [u'logstash-2020.03.09', u'logstash-2020.03.11', u'logstash-2020.03.12', u'logstash-2020.03.13', u'logstash-2020.03.14', u'logstash-2020.03.15', u'logstash-2020.03.16', u'logstash-2020.03.17', u'logstash-2020.03.18', u'logstash-2020.03.19', u'logstash-2020.03.20', u'logstash-2020.03.21', u'logstash-2020.03.22', u'logstash-2020.03.23', u'logstash-2020.03.24', u'logstash-2020.03.25', u'logstash-2020.03.26', u'logstash-2020.03.27', u'logstash-2020.03.28', u'logstash-2020.03.29', u'logstash-2020.03.30', u'logstash-2020.03.31', u'logstash-2020.04.01', u'logstash-2020.04.02', u'logstash-2020.04.03', u'logstash-2020.04.04', u'logstash-2020.04.05', u'logstash-2020.04.06', u'logstash-2020.04.07', u'logstash-2020.04.08', u'logstash-2020.04.09', u'logstash-2020.04.10', u'logstash-2020.04.11', u'logstash-2020.04.12', u'logstash-2020.04.13', u'logstash-2020.04.14', u'logstash-2020.04.15', u'logstash-2020.04.16', u'logstash-2020.04.17', u'logstash-2020.04.18', u'logstash-2020.04.19', u'logstash-2020.04.20', u'logstash-2020.04.21', u'logstash-2020.04.22', u'logstash-2020.04.23', u'logstash-2020.04.24', u'logstash-2020.04.25', u'logstash-2020.04.26', u'logstash-2020.04.27', u'logstash-2020.04.28', u'logstash-2020.04.29', u'logstash-2020.04.30', u'logstash-2020.05.01', u'logstash-2020.05.02', u'logstash-2020.05.03', u'logstash-2020.05.04', u'logstash-2020.05.05', u'logstash-2020.05.06', u'logstash-2020.05.07', u'logstash-2020.05.08', u'logstash-2020.05.09', u'logstash-2020.05.10', u'logstash-2020.05.11', u'logstash-2020.05.12', u'logstash-2020.05.13', u'logstash-2020.05.14', u'logstash-2020.05.15', u'logstash-2020.05.16']
2020-07-15 02:27:21,617 ERROR     No indices provided.
2020-07-15 02:27:21,617 WARNING   Job did not complete successfully.

However, with "indices --older-than 30" -- it works. So with that - do I need to change anything in Admin UI under Snapshots & Maintenance?

Code: Select all

sysadm@epselog01:~$ sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 30 --time-unit days --timestring %Y.%m.%d
2020-07-15 02:27:59,861 INFO      Job starting: snapshot indices
2020-07-15 02:27:59,861 WARNING   Overriding default connection timeout.  New timeout: 21600
2020-07-15 02:27:59,871 INFO      Action snapshot will be performed on the following indices: [u'logstash-2020.03.09', u'logstash-2020.03.11', u'logstash-2020.03.12', u'logstash-2020.03.13', u'logstash-2020.03.14', u'logstash-2020.03.15', u'logstash-2020.03.16', u'logstash-2020.03.17', u'logstash-2020.03.18', u'logstash-2020.03.19', u'logstash-2020.03.20', u'logstash-2020.03.21', u'logstash-2020.03.22', u'logstash-2020.03.23', u'logstash-2020.03.24', u'logstash-2020.03.25', u'logstash-2020.03.26', u'logstash-2020.03.27', u'logstash-2020.03.28', u'logstash-2020.03.29', u'logstash-2020.03.30', u'logstash-2020.03.31', u'logstash-2020.04.01', u'logstash-2020.04.02', u'logstash-2020.04.03', u'logstash-2020.04.04', u'logstash-2020.04.05', u'logstash-2020.04.06', u'logstash-2020.04.07', u'logstash-2020.04.08', u'logstash-2020.04.09', u'logstash-2020.04.10', u'logstash-2020.04.11', u'logstash-2020.04.12', u'logstash-2020.04.13', u'logstash-2020.04.14', u'logstash-2020.04.15', u'logstash-2020.04.16', u'logstash-2020.04.17', u'logstash-2020.04.18', u'logstash-2020.04.19', u'logstash-2020.04.20', u'logstash-2020.04.21', u'logstash-2020.04.22', u'logstash-2020.04.23', u'logstash-2020.04.24', u'logstash-2020.04.25', u'logstash-2020.04.26', u'logstash-2020.04.27', u'logstash-2020.04.28', u'logstash-2020.04.29', u'logstash-2020.04.30', u'logstash-2020.05.01', u'logstash-2020.05.02', u'logstash-2020.05.03', u'logstash-2020.05.04', u'logstash-2020.05.05', u'logstash-2020.05.06', u'logstash-2020.05.07', u'logstash-2020.05.08', u'logstash-2020.05.09', u'logstash-2020.05.10', u'logstash-2020.05.11', u'logstash-2020.05.12', u'logstash-2020.05.13', u'logstash-2020.05.14', u'logstash-2020.05.15', u'logstash-2020.05.16', u'logstash-2020.05.17', u'logstash-2020.05.18', u'logstash-2020.05.19', u'logstash-2020.05.20', u'logstash-2020.05.21', u'logstash-2020.05.22', u'logstash-2020.05.23', u'logstash-2020.05.24', u'logstash-2020.05.25', u'logstash-2020.05.26', u'logstash-2020.05.27', u'logstash-2020.05.28', u'logstash-2020.05.29', u'logstash-2020.05.30', u'logstash-2020.05.31', u'logstash-2020.06.01', u'logstash-2020.06.02', u'logstash-2020.06.03', u'logstash-2020.06.04', u'logstash-2020.06.05', u'logstash-2020.06.06', u'logstash-2020.06.07', u'logstash-2020.06.08', u'logstash-2020.06.09', u'logstash-2020.06.10', u'logstash-2020.06.11', u'logstash-2020.06.12', u'logstash-2020.06.13', u'logstash-2020.06.14', u'logstash-2020.06.15']
2020-07-15 02:28:30,546 INFO      Snapshot name: curator-20200715022830

2020-07-15 02:36:13,248 INFO      Snapshot curator-20200715022830 successfully completed.
2020-07-15 02:36:13,249 INFO      Job completed successfully.

[songviet]

Furthermore, with above success command, it just returns log SUCCESS for just only "logstash-2020.06.15" folder, other directories still KB size?

And again, with "indices --older-than 1", it's FAILED.

Code: Select all

sysadm@epselog01:~$ sudo /usr/local/nagioslogserver/scripts/curator.sh snapshot --repository "Snapshot Repository (to Windows)" --ignore_unavailable indices --older-than 1 --time-unit days --timestring %Y.%m.%d
[sudo] password for sysadm:
2020-07-15 02:43:47,160 INFO      Job starting: snapshot indices
2020-07-15 02:43:47,160 WARNING   Overriding default connection timeout.  New timeout: 21600
2020-07-15 02:43:47,171 INFO      Action snapshot will be performed on the following indices: [u'logstash-2020.03.09', u'logstash-2020.03.11', u'logstash-2020.03.12', u'logstash-2020.03.13', u'logstash-2020.03.14', u'logstash-2020.03.15', u'logstash-2020.03.16', u'logstash-2020.03.17', u'logstash-2020.03.18', u'logstash-2020.03.19', u'logstash-2020.03.20', u'logstash-2020.03.21', u'logstash-2020.03.22', u'logstash-2020.03.23', u'logstash-2020.03.24', u'logstash-2020.03.25', u'logstash-2020.03.26', u'logstash-2020.03.27', u'logstash-2020.03.28', u'logstash-2020.03.29', u'logstash-2020.03.30', u'logstash-2020.03.31', u'logstash-2020.04.01', u'logstash-2020.04.02', u'logstash-2020.04.03', u'logstash-2020.04.04', u'logstash-2020.04.05', u'logstash-2020.04.06', u'logstash-2020.04.07', u'logstash-2020.04.08', u'logstash-2020.04.09', u'logstash-2020.04.10', u'logstash-2020.04.11', u'logstash-2020.04.12', u'logstash-2020.04.13', u'logstash-2020.04.14', u'logstash-2020.04.15', u'logstash-2020.04.16', u'logstash-2020.04.17', u'logstash-2020.04.18', u'logstash-2020.04.19', u'logstash-2020.04.20', u'logstash-2020.04.21', u'logstash-2020.04.22', u'logstash-2020.04.23', u'logstash-2020.04.24', u'logstash-2020.04.25', u'logstash-2020.04.26', u'logstash-2020.04.27', u'logstash-2020.04.28', u'logstash-2020.04.29', u'logstash-2020.04.30', u'logstash-2020.05.01', u'logstash-2020.05.02', u'logstash-2020.05.03', u'logstash-2020.05.04', u'logstash-2020.05.05', u'logstash-2020.05.06', u'logstash-2020.05.07', u'logstash-2020.05.08', u'logstash-2020.05.09', u'logstash-2020.05.10', u'logstash-2020.05.11', u'logstash-2020.05.12', u'logstash-2020.05.13', u'logstash-2020.05.14', u'logstash-2020.05.15', u'logstash-2020.05.16', u'logstash-2020.05.17', u'logstash-2020.05.18', u'logstash-2020.05.19', u'logstash-2020.05.20', u'logstash-2020.05.21', u'logstash-2020.05.22', u'logstash-2020.05.23', u'logstash-2020.05.24', u'logstash-2020.05.25', u'logstash-2020.05.26', u'logstash-2020.05.27', u'logstash-2020.05.28', u'logstash-2020.05.29', u'logstash-2020.05.30', u'logstash-2020.05.31', u'logstash-2020.06.01', u'logstash-2020.06.02', u'logstash-2020.06.03', u'logstash-2020.06.04', u'logstash-2020.06.05', u'logstash-2020.06.06', u'logstash-2020.06.07', u'logstash-2020.06.08', u'logstash-2020.06.09', u'logstash-2020.06.10', u'logstash-2020.06.11', u'logstash-2020.06.12', u'logstash-2020.06.13', u'logstash-2020.06.14', u'logstash-2020.06.15', u'logstash-2020.06.16', u'logstash-2020.06.17', u'logstash-2020.06.18', u'logstash-2020.06.19', u'logstash-2020.06.20', u'logstash-2020.06.21', u'logstash-2020.06.22', u'logstash-2020.06.23', u'logstash-2020.06.24', u'logstash-2020.06.25', u'logstash-2020.06.26', u'logstash-2020.06.27', u'logstash-2020.06.28', u'logstash-2020.06.29', u'logstash-2020.06.30', u'logstash-2020.07.01', u'logstash-2020.07.02', u'logstash-2020.07.03', u'logstash-2020.07.04', u'logstash-2020.07.05', u'logstash-2020.07.06', u'logstash-2020.07.07', u'logstash-2020.07.08', u'logstash-2020.07.09', u'logstash-2020.07.10', u'logstash-2020.07.11', u'logstash-2020.07.12', u'logstash-2020.07.13', u'logstash-2020.07.14']
2020-07-15 02:44:30,598 INFO      Snapshot name: curator-20200715024430
2020-07-15 02:44:34,967 ERROR     Snapshot FAILED completed with state: FAILED
2020-07-15 02:44:34,967 WARNING   Job did not complete successfully.

[songviet]

Moreover on below, I ran day-by-day downward:

• indices --older-than 31 >> FAILED
  indices --older-than 30 >> SUCCESS
  indices --older-than 29 >> SUCCESS
  indices --older-than 28 >> SUCCESS
  indices --older-than 27 >> SUCCESS
  indices --older-than 26 >> SUCCESS
  ....
  indices --older-than 15 >> SUCCESS
  indices --older-than 14 >> SUCCESS
  indices --older-than 13 >> SUCCESS
  indices --older-than 12 >> FAILED
  indices --older-than 11 >> FAILED
  indices --older-than 10 >> FAILED
  indices --older-than 9 >> FAILED
  indices --older-than 8 >> FAILED
  indices --older-than 7 >> FAILED
  indices --older-than 6 >> FAILED
  indices --older-than 5 >> FAILED
  indices --older-than 4 >> FAILED
  indices --older-than 3 >> FAILED
  indices --older-than 2 >> FAILED
  indices --older-than 1 >> FAILED

Same question as above, is there something wrong? Do we need configure anything in Admin UI (Command Subsystem, ...) to make it run automatically?