robot-systest/testsuite/sa_02-vnf_with_vim_metrics_and_autoscaling.robot

   1 #   Licensed under the Apache License, Version 2.0 (the "License");
   2 #   you may not use this file except in compliance with the License.
   3 #   You may obtain a copy of the License at
   4 #
   5 #       http://www.apache.org/licenses/LICENSE-2.0
   6 #
   7 #   Unless required by applicable law or agreed to in writing, software
   8 #   distributed under the License is distributed on an "AS IS" BASIS,
   9 #   WITHOUT WARRANTIES OR CONDITIONS OF ANY KIND, either express or implied.
  10 #   See the License for the specific language governing permissions and
  11 #   limitations under the License.
  12
  13 *** Settings ***
  14 Documentation     [SA-02] VNF with VIM-based metrics and auto-scaling.
  15
  16 Library   OperatingSystem
  17 Library   String
  18 Library   Collections
  19 Library   SSHLibrary
  20
  21 Resource   %{ROBOT_DEVOPS_FOLDER}/lib/vnfd_lib.robot
  22 Resource   %{ROBOT_DEVOPS_FOLDER}/lib/nsd_lib.robot
  23 Resource   %{ROBOT_DEVOPS_FOLDER}/lib/ns_lib.robot
  24 Resource   %{ROBOT_DEVOPS_FOLDER}/lib/ssh_lib.robot
  25 Resource   %{ROBOT_DEVOPS_FOLDER}/lib/prometheus_lib.robot
  26
  27 Variables   %{ROBOT_DEVOPS_FOLDER}/resources/sa_02-vnf_with_vim_metrics_and_autoscaling_data.py
  28
  29 Suite Teardown   Run Keyword And Ignore Error   Suite Cleanup
  30
  31
  32 *** Variables ***
  33 ${ns_id}   ${EMPTY}
  34 ${username}   ubuntu
  35 ${password}   osm4u
  36 ${vnf_member_index}   1
  37 ${vnf_ip_addr}   ${EMPTY}
  38 ${vnf_id}   ${EMPTY}
  39 ${ns_config}   {vld: [ {name: mgmtnet, vim-network-name: %{VIM_MGMT_NET}} ] }
  40 ${success_return_code}   0
  41
  42
  43 *** Test Cases ***
  44 Create VNF Descriptor
  45     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
  46
  47     Create VNFD  '%{PACKAGES_FOLDER}/${vnfd_pkg}'
  48
  49
  50 Get Scale-Out Threshold From VNF
  51     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
  52
  53     ${rc}  ${stdout}=  Run and Return RC and Output  osm vnfpkg-show ${vnfd_name} --literal | yq '.df[0]."scaling-aspect"[0]."scaling-policy"[0]."scaling-criteria"[0]."scale-out-threshold"' | tr -d \\"
  54     Should Be Equal As Integers  ${rc}  ${success_return_code}  msg=${stdout}  values=False
  55     ${scaleout_threshold}=   Convert To Number   ${stdout}
  56     Set Suite Variable   ${metric_threshold}   ${scaleout_threshold}
  57     log   ${metric_threshold}
  58
  59
  60 Create NS Descriptor
  61     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
  62
  63     Create NSD  '%{PACKAGES_FOLDER}/${nsd_pkg}'
  64
  65
  66 Instantiate Network Service
  67     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
  68
  69     ${id}=  Create Network Service  ${nsd_name}  %{VIM_TARGET}  ${ns_name}  ${ns_config}  ${publickey}
  70     Set Suite Variable  ${ns_id}  ${id}
  71
  72
  73 Get VNF Id
  74     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
  75
  76     @{vnfr_list}=  Get Ns Vnfr Ids  ${ns_id}
  77     Log List  ${vnfr_list}
  78     Set Suite Variable   ${vnf_id}   ${vnfr_list}[0]
  79
  80
  81 Get VNF IP Address
  82     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
  83
  84     ${ip_addr}=  Get Vnf Management Ip Address   ${ns_id}   ${vnf_member_index}
  85     log   ${ip_addr}
  86     Set Suite Variable   ${vnf_ip_addr}   ${ip_addr}
  87
  88
  89 Get VNF VIM-based Metric Before Auto-scaling
  90     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
  91
  92     Variable Should Exist  ${prometheus_poll_retries}  msg=Metric polling retries is not available
  93     Variable Should Exist  ${prometheus_poll_timeout}  msg=Metric polling timeout is not available
  94     Variable Should Exist  ${prometheus_host}  msg=Prometheus address is not available
  95     Variable Should Exist  ${prometheus_port}  msg=Prometheus port is not available
  96     Variable Should Exist  ${metric_name}  msg=Prometheus metric name is not available
  97     ${metric_value}=  Wait Until Keyword Succeeds  ${prometheus_poll_retries}  ${prometheus_poll_timeout}  Get Metric  ${prometheus_host}  ${prometheus_port}  ${metric_name}
  98     Run Keyword Unless  ${metric_value} > 0  Fail  msg=The metric '${metric_name}' value is '${metric_value}'
  99     Run Keyword Unless  ${metric_value} < ${metric_threshold}  Fail  msg=The metric '${metric_name}' value is higher than '${metric_threshold}' before scaling
 100
 101
 102 Increase VIM-based Metric To Force Auto-scaling
 103     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
 104
 105     Variable Should Exist  ${privatekey}  msg=SSH private key not available
 106     Execute Remote Command Check Rc Return Output   ${vnf_ip_addr}   ${username}   ${password}   ${privatekey}   for i in {1..9}; do yes > /dev/null & done
 107
 108
 109 Wait VIM-based Metric To Exceed Threshold
 110     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
 111
 112     Variable Should Exist  ${prometheus_poll_retries}  msg=Metric polling retries is not available
 113     Variable Should Exist  ${prometheus_poll_timeout}  msg=Metric polling timeout is not available
 114     Wait Until Keyword Succeeds  ${prometheus_poll_retries}  ${prometheus_poll_timeout}  Check VIM-based Metric Exceeds Threshold
 115
 116
 117 Get VDUs After Auto-scaling
 118     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression
 119
 120     Sleep  2 minutes  Wait for auto-scale to take place
 121     @{vdur_list}=  Get Vnf Vdur Names  ${vnf_id}
 122     Log List  ${vdur_list}
 123     ${vdurs}=  Get Length  ${vdur_list}
 124     Run Keyword Unless  ${vdurs} > 1  Fail  msg=There is no new VDU after auto-scaling
 125
 126
 127 Delete NS Instance
 128     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression  cleanup
 129
 130     Delete NS  ${ns_name}
 131
 132
 133 Delete NS Descriptor
 134     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression  cleanup
 135
 136     Delete NSD  ${nsd_name}
 137
 138
 139 Delete VNF Descriptor
 140     [Tags]   vnf_vim_metrics_autoscaling   sanity   regression  cleanup
 141
 142     Delete VNFD  ${vnfd_name}
 143
 144
 145 *** Keywords ***
 146 Suite Cleanup
 147     [Documentation]  Test Suite Cleanup: Deleting descriptors and NS instance
 148
 149     Run Keyword If Any Tests Failed  Delete NS  ${ns_name}
 150     Run Keyword If Any Tests Failed  Delete NSD  ${nsd_name}
 151     Run Keyword If Any Tests Failed  Delete VNFD  ${vnfd_name}
 152
 153
 154 Check VIM-based Metric Exceeds Threshold
 155     [Documentation]  Auxiliar keyword to check if metric exceeds threshold
 156
 157     Variable Should Exist  ${prometheus_host}  msg=Prometheus address is not available
 158     Variable Should Exist  ${prometheus_port}  msg=Prometheus port is not available
 159     Variable Should Exist  ${metric_name}  msg=Prometheus metric name is not available
 160     ${metric_value}=  Get Metric  ${prometheus_host}  ${prometheus_port}  ${metric_name}
 161     Run Keyword Unless  ${metric_value} > ${metric_threshold}  Fail  msg=The metric '${metric_name}' value is '${metric_value}' which is lower than '${metric_threshold}'
 162
 163