Updated the OpenSSL, CMake and Device SDK version and added dependent…

… libs for local proxy integration tests (#441) * updated the OpenSSL version and added dependent lib * updated SDK version of integ tests * updated SDK tag * updated CMake version for installing SDK * removed libssl-dev which was causing CMake built failure * typo * cmake prereq * installing openssl * installing openssl
awslabs · Dec 7, 2023 · cb81641 · cb81641
1 parent 00f68ce
commit cb81641
Show file tree

Hide file tree

Showing 11 changed files with 107 additions and 8 deletions.
diff --git a/.github/docker-images/base-images/device-client/amazonlinux/Dockerfile b/.github/docker-images/base-images/device-client/amazonlinux/Dockerfile
@@ -18,6 +18,8 @@ RUN yum -y update \
     gcc-c++ \
     softhsm \
     zlib-devel \
+    perl-IPC-Cmd \
+    perl-Pod-Html \
     && yum clean all \
     && rm -rf /var/cache/yum
 

diff --git a/.github/docker-images/base-images/device-client/ubi8/Dockerfile b/.github/docker-images/base-images/device-client/ubi8/Dockerfile
@@ -18,6 +18,8 @@ RUN yum -y update \
     make \
     gcc \
     gcc-c++ \
+    perl-IPC-Cmd \
+    perl-Pod-Html \
     && yum clean all \
     && rm -rf /var/cache/yum
 

diff --git a/.github/docker-images/base-images/integration-tests/amazonlinux/Dockerfile b/.github/docker-images/base-images/integration-tests/amazonlinux/Dockerfile
@@ -1,6 +1,6 @@
 FROM public.ecr.aws/amazonlinux/amazonlinux:2.0.20230307.0
 
-ARG OPENSSL_VERSION=1.1.1n
+ARG OPENSSL_VERSION=3.0.8
 
 RUN yum -y update && yum -y install \
     autoconf \
@@ -14,6 +14,8 @@ RUN yum -y update && yum -y install \
     perl \
     softhsm \
     tar \
+    perl-IPC-Cmd \
+    perl-Pod-Html \
     wget
 
 

diff --git a/.github/docker-images/base-images/integration-tests/ubi8/Dockerfile b/.github/docker-images/base-images/integration-tests/ubi8/Dockerfile
@@ -1,6 +1,6 @@
 FROM registry.access.redhat.com/ubi8/ubi
 
-ARG OPENSSL_VERSION=1.1.1n
+ARG OPENSSL_VERSION=3.0.8
 
 RUN yum -y update && yum -y install \
     autoconf \
@@ -13,6 +13,8 @@ RUN yum -y update && yum -y install \
     make \
     perl \
     tar \
+    perl-IPC-Cmd \
+    perl-Pod-Html \
     wget
 
 

diff --git a/.github/docker-images/base-images/integration-tests/ubuntu/Dockerfile b/.github/docker-images/base-images/integration-tests/ubuntu/Dockerfile
@@ -1,6 +1,6 @@
 FROM ubuntu:18.04
 
-ARG OPENSSL_VERSION=1.1.1n
+ARG OPENSSL_VERSION=3.0.8
 
 RUN apt-get update && apt-get install -y \
     wget \

diff --git a/.github/docker-images/integration-tests/amazonlinux/Dockerfile b/.github/docker-images/integration-tests/amazonlinux/Dockerfile
@@ -2,6 +2,21 @@ ARG BASE_IMAGE
 ARG PRE_RELEASE_IMAGE
 FROM  ${BASE_IMAGE} AS build_integration_tests
 
+###############################################################################
+# Install pre-built CMake
+###############################################################################
+WORKDIR /tmp
+RUN curl -sSL https://github.com/Kitware/CMake/releases/download/v3.28.0/cmake-3.28.0.tar.gz -o cmake-3.28.0.tar.gz \
+    && tar -zxvf cmake-3.28.0.tar.gz \
+    && cd cmake-3.28.0 \
+    && ./bootstrap \
+    && make -j 2 \
+    && make install
+
+###############################################################################
+# Install Prerequisites
+###############################################################################
+
 RUN yum -y update && yum -y install \
         autoconf \
         libtool \
@@ -14,10 +29,15 @@ RUN mkdir -p /root/integration-tests/build \
     && cmake .. -DCMAKE_BUILD_TYPE=DEBUG \
     && cmake --build . --target aws-iot-device-client-integration-tests
 
+###############################################################################
 # Actual docker image
+###############################################################################
+
 FROM ${PRE_RELEASE_IMAGE} AS runner
 
+###############################################################################
 # Install openssl for libssl dependency.
+###############################################################################
 RUN yum update -y && yum install -y libatomic libcurl-devel openssl-devel libuuid-devel wget && \
     rm -rf /var/cache/yum && \
     yum clean all

diff --git a/.github/docker-images/integration-tests/ubi8/Dockerfile b/.github/docker-images/integration-tests/ubi8/Dockerfile
@@ -2,6 +2,21 @@ ARG BASE_IMAGE
 ARG PRE_RELEASE_IMAGE
 FROM  ${BASE_IMAGE} AS build_integration_tests
 
+###############################################################################
+# Install pre-built CMake
+###############################################################################
+WORKDIR /tmp
+RUN curl -sSL https://github.com/Kitware/CMake/releases/download/v3.28.0/cmake-3.28.0.tar.gz -o cmake-3.28.0.tar.gz \
+    && tar -zxvf cmake-3.28.0.tar.gz \
+    && cd cmake-3.28.0 \
+    && ./bootstrap \
+    && make -j 2 \
+    && make install
+
+###############################################################################
+# Install Prerequisites
+###############################################################################
+
 RUN #yum update -y && yum install -y libcurl-devel openssl-devel libuuid-devel make gcc gcc-c++ git zlib-devel
 
 COPY ./integration-tests /root/integration-tests
@@ -10,10 +25,16 @@ RUN mkdir -p /root/integration-tests/build \
     && cmake .. -DCMAKE_BUILD_TYPE=DEBUG \
     && cmake --build . --target aws-iot-device-client-integration-tests
 
+###############################################################################
 # Actual docker image
+###############################################################################
+
 FROM ${PRE_RELEASE_IMAGE} AS runner
 
+###############################################################################
 # Install openssl for libssl dependency.
+###############################################################################
+
 RUN yum update -y && yum install -y libatomic libcurl-devel openssl-devel libuuid-devel wget && \
     rm -rf /var/cache/yum && \
     yum clean all

diff --git a/.github/docker-images/integration-tests/ubuntu/Dockerfile b/.github/docker-images/integration-tests/ubuntu/Dockerfile
@@ -3,13 +3,58 @@ ARG BASE_IMAGE
 ARG PRE_RELEASE_IMAGE
 FROM ${OS} AS build_localproxy
 
+ARG OPENSSL_VERSION=3.0.8
+
+###############################################################################
+# Install prereqs for CMake
+###############################################################################
+RUN apt-get update -qq \
+    && apt-get -y install \
+    git \
+    clang-format \
+    curl \
+    build-essential \
+    wget \
+    libc6-dbg \
+    softhsm \
+    zlib1g-dev \
+    && apt-get clean
+
+
+###############################################################################
+# Install OpenSSL 3.0.8
+###############################################################################
+WORKDIR /tmp
+RUN wget https://www.openssl.org/source/openssl-${OPENSSL_VERSION}.tar.gz \
+    && tar -zxvf openssl-${OPENSSL_VERSION}.tar.gz \
+    && cd openssl-${OPENSSL_VERSION} \
+    && ./config \
+    && make \
+    && make install \
+    && ldconfig
+
+###############################################################################
+# Install pre-built CMake
+###############################################################################
+WORKDIR /tmp
+RUN curl -sSL https://github.com/Kitware/CMake/releases/download/v3.28.0/cmake-3.28.0.tar.gz -o cmake-3.28.0.tar.gz \
+    && tar -zxvf cmake-3.28.0.tar.gz \
+    && cd cmake-3.28.0 \
+    && ./bootstrap \
+    && make -j 2 \
+    && make install
+
+###############################################################################
 # Install Prerequisites
+###############################################################################
 
 RUN apt update && apt upgrade -y && \
 	apt install -y git libboost-all-dev autoconf automake \
 	wget libtool curl make g++ unzip cmake libssl-dev
 
+###############################################################################
 # Install Dependencies
+###############################################################################
 
 RUN mkdir /home/dependencies
 WORKDIR /home/dependencies
@@ -74,16 +119,21 @@ RUN mkdir -p /root/integration-tests/build \
     && cmake .. -DCMAKE_BUILD_TYPE=DEBUG \
     && cmake --build . --target aws-iot-device-client-integration-tests
 
+###############################################################################
 # Actual docker image
+###############################################################################
+
 FROM ${PRE_RELEASE_IMAGE} AS runner
 RUN apt-get update && apt-get install -y libcurl4-openssl-dev libssl-dev uuid-dev zlib1g-dev libpulse-dev wget ssh ca-certificates wget apt-utils
 
 RUN mkdir -p /home/aws-iot-securetunneling-localproxy/certs && \
     cd /home/aws-iot-securetunneling-localproxy/certs && \
     wget https://www.amazontrust.com/repository/AmazonRootCA1.pem && \
 	openssl rehash ./
+###############################################################################
+# Copy the binaries from builder stages.
+###############################################################################
 
-# # Copy the binaries from builder stages.
 COPY --from=build_localproxy /home/aws-iot-securetunneling-localproxy/localproxy /localproxy
 COPY --from=build_integration_tests /root/integration-tests/build/aws-iot-device-client-integration-tests /aws-iot-device-client-integration-tests
 COPY --from=build_integration_tests /root/integration-tests/source/tunneling/test-tunnel.sh /test-tunnel.sh

diff --git a/integration-tests/CMakeLists.txt b/integration-tests/CMakeLists.txt
@@ -1,4 +1,4 @@
-cmake_minimum_required(VERSION 3.10)
+cmake_minimum_required(VERSION 3.13)
 project(aws-iot-device-client-integration-tests)
 
 set(OPENSSL_USE_STATIC_LIBS TRUE)

diff --git a/integration-tests/CMakeLists.txt.gtest b/integration-tests/CMakeLists.txt.gtest
@@ -1,4 +1,4 @@
-cmake_minimum_required(VERSION 3.10)
+cmake_minimum_required(VERSION 3.13)
 
 project(googletest-download NONE)
 

diff --git a/integration-tests/CMakeLists.txt.libawscpp b/integration-tests/CMakeLists.txt.libawscpp
@@ -1,10 +1,10 @@
-cmake_minimum_required(VERSION 3.10)
+cmake_minimum_required(VERSION 3.13)
 project(aws-sdk-cpp NONE)
 include(ExternalProject)
 
 ExternalProject_Add(aws-sdk-cpp
     GIT_REPOSITORY    https://github.com/aws/aws-sdk-cpp.git
-    GIT_TAG           1.11.56
+    GIT_TAG           1.11.219
     LIST_SEPARATOR    "|"
     CMAKE_ARGS       -DBUILD_SHARED_LIBS=OFF
                      -DBUILD_ONLY=iot|iotsecuretunneling