NEG kết hợp Looker PSC Southbound đến máy chủ cục bộ

1. Giới thiệu

LƯU Ý: Looker hỗ trợ Trình tạo dữ liệu hướng Nam ở mọi khu vực. Để truy cập vào Looker theo hướng Bắc, điểm cuối hoặc phần phụ trợ của người dùng phải ở cùng khu vực với thực thể PSC của Looker.

Trong lớp học lập trình này, bạn sẽ thực hiện kết nối phía nam với cơ sở dữ liệu postgres tại chỗ qua H-VPN bằng cách sử dụng bộ cân bằng tải proxy tcp nội bộ và nhóm điểm cuối mạng kết hợp được gọi từ Looker PSC dưới dạng Người dùng dịch vụ.

Private Service Connect là một tính năng của mạng Google Cloud, cho phép người dùng truy cập riêng tư vào các dịch vụ được quản lý từ bên trong mạng VPC của họ. Tương tự, dịch vụ này cho phép nhà sản xuất dịch vụ được quản lý lưu trữ các dịch vụ này trong mạng VPC riêng của họ và cung cấp kết nối riêng tư cho người dùng. Ví dụ: khi bạn sử dụng Private Service Connect để truy cập vào Looker, bạn là người dùng dịch vụ và Google là nhà cung cấp dịch vụ, như được làm nổi bật trong Hình 1.

Hình 1.

Quyền truy cập từ dưới lên (còn gọi là PSC đảo ngược) cho phép Người dùng tạo một Dịch vụ đã xuất bản dưới dạng Nhà sản xuất để cho phép Looker truy cập vào các điểm cuối tại chỗ, trong VPC, vào các dịch vụ được quản lý và dịch vụ kết hợp. Bạn có thể triển khai các kết nối hướng Nam ở bất kỳ khu vực nào, bất kể nơi triển khai Looker PSC, như được làm nổi bật trong Hình 2.

Hình 2.

Kiến thức bạn sẽ học được

• Yêu cầu về mạng
• Tạo dịch vụ nhà sản xuất Private Service Connect
• Tạo điểm cuối Private Service Connect trong Looker
• Thiết lập kết nối với cơ sở dữ liệu postgres tại chỗ từ Looker bằng Kết nối kiểm thử

Bạn cần có

• Dự án Google Cloud có quyền của Chủ sở hữu
• Thực thể PSC Looker hiện có

2. Sản phẩm bạn sẽ tạo ra

Bạn sẽ thiết lập một mạng Nhà sản xuất, looker-psc-demo, để triển khai bộ cân bằng tải proxy tcp nội bộ và NEG kết hợp được phát hành dưới dạng dịch vụ thông qua Private Service Connect (PSC). Để minh hoạ cơ sở dữ liệu tại chỗ, bạn sẽ triển khai VPC on-prem-demo kết nối với VPC looker-psc-demo bằng HA-VPN.

Bạn sẽ thực hiện các thao tác sau để xác thực quyền truy cập vào dịch vụ Nhà sản xuất:

• Tạo Điểm cuối PSC trong Looker được liên kết với Tệp đính kèm dịch vụ nhà sản xuất
• Sử dụng Looker Console để xác thực kết nối với cơ sở dữ liệu postgres tại chỗ

3. Yêu cầu về mạng

Dưới đây là thông tin chi tiết về các yêu cầu về mạng cho mạng Nhà sản xuất, trong đó người dùng trong lớp học lập trình này là thực thể Looker PSC.

Thành phần	Mô tả
VPC (looker-psc-demo)	VPC ở chế độ tuỳ chỉnh
VPC (on-prem-demo)	VPC ở chế độ tuỳ chỉnh
Mạng con PSC NAT	Các gói từ mạng VPC của người dùng được dịch bằng NAT nguồn (SNAT) để địa chỉ IP nguồn ban đầu của chúng được chuyển đổi thành địa chỉ IP nguồn từ mạng con NAT trong mạng VPC của nhà sản xuất.
Mạng con quy tắc chuyển tiếp PSC	Dùng để phân bổ địa chỉ IP cho Trình cân bằng tải proxy TCP nội bộ theo khu vực
Mạng con PSC NEG	Dùng để phân bổ địa chỉ IP cho Nhóm thiết bị đầu cuối của mạng
Mạng con chỉ dành cho proxy	Mỗi proxy của bộ cân bằng tải được chỉ định một địa chỉ IP nội bộ. Các gói được gửi từ proxy đến máy ảo phụ trợ hoặc điểm cuối có địa chỉ IP nguồn từ mạng con chỉ dành cho proxy.
NEG kết hợp	Các dịch vụ đám mây tại chỗ và các dịch vụ đám mây khác được coi như mọi phần phụ trợ Cân bằng tải trên đám mây khác. Điểm khác biệt chính là bạn sử dụng kết nối kết hợp NEG để định cấu hình các điểm cuối của các phần phụ trợ này. Các điểm cuối phải là tổ hợp IP:cổng hợp lệ mà trình cân bằng tải của bạn có thể truy cập bằng cách sử dụng các sản phẩm kết nối kết hợp như Cloud VPN hoặc Cloud Interconnect.
Dịch vụ phụ trợ	Dịch vụ phụ trợ đóng vai trò là cầu nối giữa trình cân bằng tải và tài nguyên phụ trợ. Trong hướng dẫn này, dịch vụ phụ trợ được liên kết với NEG kết hợp.
Cloud Router	Cloud NAT dựa vào Bộ định tuyến trên đám mây để có các chức năng của vùng điều khiển, nhưng không dùng để quản lý phiên BGP. Bộ định tuyến đám mây được dùng cho BGP được thiết lập để thiết lập HA-VPN giữa VPC psc-looker-demo và on-prem-demo.
HA-VPN	VPN HA giữa các mạng VPC của Google Cloud. Trong cấu trúc này, bạn có thể kết nối hai mạng VPC trên Google Cloud bằng cách sử dụng một cổng VPN HA trong mỗi mạng. Các mạng VPC có thể nằm trong cùng một khu vực hoặc nhiều khu vực.
Cloud NAT	Được VPC on-prem-demo sử dụng cho lưu lượng truy cập Internet

4. Cấu trúc liên kết của lớp học lập trình

5. Cách thiết lập và các yêu cầu

Thiết lập môi trường theo tốc độ của riêng bạn

1. Đăng nhập vào Google Cloud Console rồi tạo một dự án mới hoặc sử dụng lại một dự án hiện có. Nếu chưa có tài khoản Gmail hoặc Google Workspace, bạn phải tạo một tài khoản.

• Tên dự án là tên hiển thị cho người tham gia dự án này. Đây là một chuỗi ký tự không được API của Google sử dụng. Bạn luôn có thể cập nhật thông tin này.
• Mã dự án là duy nhất trên tất cả các dự án Google Cloud và không thể thay đổi (không thể thay đổi sau khi đặt). Cloud Console sẽ tự động tạo một chuỗi duy nhất; thường thì bạn không cần quan tâm đến chuỗi này. Trong hầu hết các lớp học lập trình, bạn sẽ cần tham chiếu đến Mã dự án (thường được xác định là PROJECT_ID). Nếu không thích mã được tạo, bạn có thể tạo một mã ngẫu nhiên khác. Ngoài ra, bạn có thể thử dùng email của riêng mình để xem có thể sử dụng hay không. Bạn không thể thay đổi thông tin này sau bước này và thông tin này sẽ được giữ nguyên trong suốt thời gian diễn ra dự án.
• Xin lưu ý rằng có một giá trị thứ ba là Mã dự án mà một số API sử dụng. Tìm hiểu thêm về cả ba giá trị này trong tài liệu.

Thận trọng: Mã dự án là mã duy nhất trên toàn cầu và người khác không thể sử dụng mã này sau khi bạn chọn. Bạn là người dùng duy nhất của mã đó. Ngay cả khi một dự án bị xoá, bạn cũng không thể sử dụng lại mã nhận dạng

Lưu ý: Nếu sử dụng tài khoản Gmail, bạn có thể đặt vị trí mặc định thành Không có tổ chức. Nếu bạn sử dụng tài khoản Google Workspace, hãy chọn một vị trí phù hợp với tổ chức của bạn.

2. Tiếp theo, bạn cần bật tính năng thanh toán trong Cloud Console để sử dụng các tài nguyên/API trên Cloud. Việc tham gia lớp học lập trình này sẽ không tốn kém nhiều chi phí, nếu có. Để tắt các tài nguyên nhằm tránh bị tính phí sau khi hoàn tất hướng dẫn này, bạn có thể xoá các tài nguyên đã tạo hoặc xoá dự án. Người dùng mới của Google Cloud đủ điều kiện tham gia chương trình Dùng thử miễn phí 300 USD.

Khởi động Cloud Shell

Mặc dù có thể điều khiển Google Cloud từ xa trên máy tính xách tay, nhưng trong lớp học lập trình này, bạn sẽ sử dụng Google Cloud Shell, một môi trường dòng lệnh chạy trên đám mây.

Trong Bảng điều khiển Google Cloud, hãy nhấp vào biểu tượng Cloud Shell trên thanh công cụ trên cùng bên phải:

Quá trình cấp phép và kết nối với môi trường sẽ chỉ mất vài phút. Khi hoàn tất, bạn sẽ thấy như sau:

Máy ảo này được tải sẵn tất cả các công cụ phát triển mà bạn cần. Ứng dụng này cung cấp một thư mục gốc 5 GB ổn định và chạy trên Google Cloud, giúp nâng cao đáng kể hiệu suất mạng và xác thực. Bạn có thể thực hiện mọi thao tác trong lớp học lập trình này trong một trình duyệt. Bạn không cần cài đặt gì cả.

6. Trước khi bắt đầu

Bật API

Trong Cloud Shell, hãy đảm bảo bạn đã thiết lập mã dự án:

gcloud config list project
gcloud config set project [YOUR-PROJECT-ID]
project=[YOUR-PROJECT-ID]
region=[YOUR-REGION]
zone=[YOUR-ZONE]
echo $project
echo $region

Bật tất cả các dịch vụ cần thiết:

gcloud services enable compute.googleapis.com

7. Tạo mạng VPC của nhà sản xuất

Mạng VPC

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute networks create looker-psc-demo --subnet-mode custom

Tạo mạng con

Mạng con PSC sẽ được liên kết với Tệp đính kèm dịch vụ PSC cho mục đích Dịch địa chỉ mạng.

Bên trong Cloud Shell, hãy tạo PSC NAT Subnet (Mạng con NAT PSC):

gcloud compute networks subnets create producer-psc-nat-subnet --network looker-psc-demo --range 172.16.10.0/28 --region $region --purpose=PRIVATE_SERVICE_CONNECT

Bên trong Cloud Shell, hãy tạo mạng con quy tắc chuyển tiếp của nhà sản xuất:

gcloud compute networks subnets create producer-psc-fr-subnet --network looker-psc-demo --range 172.16.20.0/28 --region $region --enable-private-ip-google-access

Bên trong Cloud Shell, hãy tạo mạng con chỉ dành cho proxy theo khu vực của nhà sản xuất:

gcloud compute networks subnets create $region-proxy-only-subnet \
  --purpose=REGIONAL_MANAGED_PROXY \
  --role=ACTIVE \
  --region=$region \
  --network=looker-psc-demo \
  --range=10.10.10.0/24

Đặt trước địa chỉ IP của trình cân bằng tải

Bên trong Cloud Shell, hãy đặt trước một địa chỉ IP nội bộ cho trình cân bằng tải:

gcloud compute addresses create hybrid-neg-lb-ip \
  --region=$region \
  --subnet=producer-psc-fr-subnet

Trong Cloud Shell, hãy xem Địa chỉ IP được đặt trước.

gcloud compute addresses describe hybrid-neg-lb-ip \
  --region=$region | grep -i address:

Kết quả điểm dữ liệu:

gcloud compute addresses describe hybrid-neg-lb-ip   --region=$region | grep -i address:
address: 172.16.20.2

Thiết lập NEG kết hợp

Tạo NEG kết hợp và đặt –network-endpoint-type thành NON_GCP_PRIVATE_IP_PORT

Bên trong Cloud Shell, hãy tạo một NEG kết hợp dùng để truy cập vào cơ sở dữ liệu tại chỗ:

gcloud compute network-endpoint-groups create on-prem-hybrid-neg \
    --network-endpoint-type=NON_GCP_PRIVATE_IP_PORT \
    --network=looker-psc-demo \
    --zone=$zone

Bên trong Cloud Shell, hãy cập nhật NEG kết hợp bằng IP:Cổng của cơ sở dữ liệu tại chỗ, 192.168.10.4 và Cổng 5432, được tạo ở bước sau trong hướng dẫn:

gcloud compute network-endpoint-groups update on-prem-hybrid-neg \
    --add-endpoint=ip=192.168.10.4,port=5432 \
    --zone=$zone

Tạo quy trình kiểm tra tình trạng theo khu vực

LƯU Ý: Mặc dù tính năng kiểm tra trạng thái được cung cấp trong VPC looker-psc-demo, nhưng Quy tắc tường lửa cho phép truy cập được tạo trong VPC on-prem-demo để cho phép truy cập vào cơ sở dữ liệu, bao gồm cả mạng con chỉ có proxy.

Bên trong Cloud Shell, hãy tạo một quy trình kiểm tra tình trạng để thăm dò cổng cơ sở dữ liệu cục bộ, 5432:

gcloud compute health-checks create tcp on-prem-5432-healthcheck \
    --region=$region \
    --port=5432

Tạo Chính sách tường lửa mạng và Quy tắc tường lửa

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute network-firewall-policies create looker-psc-demo-policy --global

gcloud compute network-firewall-policies associations create --firewall-policy looker-psc-demo-policy --network looker-psc-demo --name looker-psc-demo --global-firewall-policy

Quy tắc tường lửa sau đây cho phép lưu lượng truy cập từ dải Mạng con NAT PSC đến tất cả các thực thể trong mạng.

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute network-firewall-policies rules create 2001 --action ALLOW --firewall-policy looker-psc-demo-policy --description "allow traffic from PSC NAT subnet" --direction INGRESS --src-ip-ranges 172.16.10.0/28 --global-firewall-policy --layer4-configs=tcp

8. Tạo dịch vụ nhà sản xuất

Tạo thành phần Trình cân bằng tải

Bên trong Cloud Shell, hãy tạo một dịch vụ phụ trợ:

gcloud compute backend-services create producer-backend-svc --region=$region --load-balancing-scheme=INTERNAL_MANAGED --protocol=TCP --region=$region --health-checks=on-prem-5432-healthcheck --health-checks-region=$region

Bên trong Cloud Shell, hãy thêm phần phụ trợ NEG kết hợp vào dịch vụ phụ trợ:

gcloud compute backend-services add-backend producer-backend-svc --network-endpoint-group=on-prem-hybrid-neg --network-endpoint-group-zone=$zone --balancing-mode=CONNECTION --max-connections=100 --region=$region

Trong Cloud Shell, hãy tạo một proxy TCP mục tiêu để định tuyến các yêu cầu đến dịch vụ phụ trợ:

gcloud compute target-tcp-proxies create producer-lb-tcp-proxy \
      --backend-service=producer-backend-svc  \
      --region=$region

Trong cú pháp sau, hãy tạo một quy tắc chuyển tiếp (trình cân bằng tải proxy tcp nội bộ).

Trong Cloud Shell, hãy thực hiện các bước sau:

gcloud compute forwarding-rules create producer-hybrid-neg-fr \
     --load-balancing-scheme=INTERNAL_MANAGED \
     --network-tier=PREMIUM \
     --network=looker-psc-demo \
     --subnet=producer-psc-fr-subnet \
     --address=hybrid-neg-lb-ip \
     --target-tcp-proxy=producer-lb-tcp-proxy \
     --target-tcp-proxy-region=$region \
     --region=$region \
     --ports=5432

Tạo tệp đính kèm dịch vụ

Bên trong Cloud Shell, hãy tạo Tệp đính kèm dịch vụ, onpremdatabase1-svc-attachment:

gcloud compute service-attachments create onpremdatabase1-svc-attachment --region=$region --producer-forwarding-rule=producer-hybrid-neg-fr --connection-preference=ACCEPT_AUTOMATIC --nat-subnets=producer-psc-nat-subnet

Tiếp theo, hãy lấy và ghi lại Tệp đính kèm dịch vụ được liệt kê trong URI selfLink bắt đầu bằng các dự án để định cấu hình điểm cuối PSC trong Looker.

selfLink: projects/<your-project-id>/regions/<your-region>/serviceAttachments/onpremdatabase1-svc-attachment

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute service-attachments describe onpremdatabase1-svc-attachment --region=$region

Ví dụ về kết quả dự kiến:

connectionPreference: ACCEPT_AUTOMATIC
creationTimestamp: '2024-09-01T16:07:51.600-07:00'
description: ''
enableProxyProtocol: false
fingerprint: cFt9rERR1iE=
id: '2549689544315850024'
kind: compute#serviceAttachment
name: onpremdatabase1-svc-attachment
natSubnets:
- https://www.googleapis.com/compute/v1/projects/$project/regions/$region/subnetworks/producer-psc-nat-subnet
pscServiceAttachmentId:
  high: '19348441121424360'
  low: '2549689544315850024'
reconcileConnections: false
region: https://www.googleapis.com/compute/v1/projects/$project/regions/$region
selfLink: https://www.googleapis.com/compute/v1/projects/$project/regions/$region/serviceAttachments/onpremdatabase1-svc-attachment
targetService: https://www.googleapis.com/compute/v1/projects/$project/regions/$region/forwardingRules/producer-hybrid-neg-fr

Trong Cloud Console, hãy chuyển đến:

Dịch vụ mạng → Private Service Connect → Dịch vụ đã phát hành

9. Thiết lập kết nối điểm cuối PSC trong Looker

Trong phần sau, bạn sẽ liên kết Tệp đính kèm dịch vụ của nhà sản xuất với PSC Looker Core thông qua việc sử dụng cờ –psc-service-attachment trong Cloud Shell cho một miền.

LƯU Ý: Mỗi khi chạy lệnh cập nhật bằng cờ –psc-service-attachment, bạn phải thêm mọi kết nối mà bạn muốn bật, bao gồm cả các kết nối đã được bật trước đó. Tham khảo tài liệu về PSC của Looker để biết ví dụ.

LƯU Ý: Bạn cần bật Looker PSC Instance (Thực thể PSC của Looker) trước khi tiếp tục.

Bên trong Cloud Shell, hãy tạo mối liên kết psc bằng cách cập nhật các tham số sau cho phù hợp với môi trường của bạn:

• INSTANCE_NAME: Tên của phiên bản Looker (Google Cloud core).
• DOMAIN_1: onprem.database1.com
• SERVICE_ATTACHMENT_1: URI được ghi lại khi tạo Tệp đính kèm dịch vụ, onpremdatabase1-svc-attachment
• REGION (KHU VỰC): Khu vực lưu trữ thực thể Looker (Google Cloud core) của bạn.

Trong Cloud Shell, hãy thực hiện như sau:

gcloud looker instances update INSTANCE_NAME \
--psc-service-attachment  domain=DOMAIN_1,attachment=SERVICE_ATTACHMENT_URI_1 \
--region=REGION

Ví dụ:

gcloud looker instances update looker-psc-instance --psc-service-attachment domain=onprem.database1.com,attachment=projects/$project/regions/$region/serviceAttachments/onpremdatabase1-svc-attachment --region=$region

Bên trong Cloud Shell, hãy xác thực serviceAttachments connectionStatus là "ACCEPTED" (ĐÃ CHẤP NHẬN), cập nhật bằng tên thực thể PSC Looker:

gcloud looker instances describe [INSTANCE_NAME] --region=$region --format=json

Ví dụ:

gcloud looker instances describe looker-psc-instance --region=$region --format=json

Ví dụ:

{
  "adminSettings": {},
  "createTime": "2024-08-23T00:00:45.339063195Z",
  "customDomain": {
    "domain": "looker.cosmopup.com",
    "state": "AVAILABLE"
  },
  "encryptionConfig": {},
  "lookerVersion": "24.14.18",
  "name": "projects/$project/locations/$region/instances/looker-psc-instance",
  "platformEdition": "LOOKER_CORE_ENTERPRISE_ANNUAL",
  "pscConfig": {
    "allowedVpcs": [
      "projects/$project/global/networks/looker-psc-demo",
      "projects/$project/global/networks/looker-shared-vpc"
    ],
    "lookerServiceAttachmentUri": "projects/t7ec792caf2a609d1-tp/regions/$region/serviceAttachments/looker-psc-f51982e2-ac0d-48b1-91bb-88656971c183",
    "serviceAttachments": [
      {
        "connectionStatus": "ACCEPTED",
        "localFqdn": "onprem.database1.com",
        "targetServiceAttachmentUri": "projects/$project/regions/$region/serviceAttachments/onpremdatabase1-svc-attachment"
      }
    ]
  },
  "pscEnabled": true,
  "state": "ACTIVE",
  "updateTime": "2024-09-01T23:15:07.426372901Z"
}

Xác thực điểm cuối PSC trong Cloud Console

Trong Cloud Console, bạn có thể xác thực Kết nối PSC

Trong Cloud Console, hãy chuyển đến:

Looker → Phiên bản Looker → Chi tiết

Tạo mạng VPC tại chỗ

Mạng VPC

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute networks create on-prem-demo --project=$project --subnet-mode=custom

Tạo mạng con cơ sở dữ liệu Postgresql

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute networks subnets create database-subnet --project=$project --range=192.168.10.0/28 --network=on-prem-demo --region=$region

Bên trong Cloud Shell, hãy đặt trước một địa chỉ IPv4 nội bộ, dùng cho onprem.database1.com, 192.168.10.4:

gcloud compute addresses create on-prem-database1-ip --region=$region --subnet=database-subnet --addresses 192.168.10.4

Tạo Trình định tuyến trên đám mây cho VPC on-prem-demo

Cloud NAT được dùng trong hướng dẫn cài đặt gói phần mềm vì thực thể máy ảo không có địa chỉ IP bên ngoài.

Bên trong Cloud Shell, hãy tạo Trình định tuyến đám mây dùng với Cloud NAT và HA-VPN:

gcloud compute routers create on-prem-cr \
   --region=$region \
   --network=on-prem-demo \
   --asn=65002

Bên trong Cloud Shell, hãy tạo cổng NAT:

gcloud compute routers nats create on-prem-nat --router=on-prem-cr --auto-allocate-nat-external-ips --nat-all-subnet-ip-ranges --region $region

Tạo thực thể kiểm thử cơ sở dữ liệu

Tạo một thực thể cơ sở dữ liệu postgres sẽ được dùng để kiểm thử và xác thực khả năng kết nối với Looker.

Bên trong Cloud Shell, hãy tạo thực thể:

gcloud compute instances create postgres-database \
    --project=$project \
    --zone=$zone \
    --machine-type=e2-medium \
    --subnet=database-subnet \
    --no-address \
    --private-network-ip 192.168.10.4 \
    --image-family debian-12 \
    --image-project debian-cloud  \
    --metadata startup-script="#! /bin/bash
      sudo apt-get update
      sudo apt -y install postgresql postgresql-client postgresql-contrib -y"

Tạo Chính sách tường lửa mạng và Quy tắc tường lửa

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute network-firewall-policies create on-prem-demo-policy --global

gcloud compute network-firewall-policies associations create --firewall-policy on-prem-demo-policy --network on-prem-demo --name on-prem-demo --global-firewall-policy

Để cho phép IAP kết nối với các phiên bản máy ảo, hãy tạo một quy tắc tường lửa:

• Áp dụng cho tất cả các phiên bản máy ảo mà bạn muốn truy cập bằng IAP.
• Cho phép lưu lượng truy cập vào từ dải IP 35.235.240.0/20. Phạm vi này chứa tất cả địa chỉ IP mà IAP sử dụng để chuyển tiếp TCP.

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute network-firewall-policies rules create 1000 --action ALLOW --firewall-policy on-prem-demo-policy --description "SSH with IAP" --direction INGRESS --src-ip-ranges 35.235.240.0/20 --layer4-configs tcp:22  --global-firewall-policy

Quy tắc tường lửa sau đây cho phép lưu lượng truy cập từ phạm vi mạng con chỉ có proxy đến tất cả các thực thể trong mạng.

Trong Cloud Shell, hãy thực hiện như sau:

gcloud compute network-firewall-policies rules create 2001 --action ALLOW --firewall-policy on-prem-demo-policy --description "allow traffic from proxy only subnet" --direction INGRESS --src-ip-ranges 10.10.10.0/24 --global-firewall-policy --layer4-configs=tcp

10. Kết nối kết hợp

Trong phần sau, bạn sẽ tạo một Trình định tuyến trên đám mây cho phép bạn trao đổi linh động các tuyến giữa đám mây riêng ảo (VPC) và mạng ngang hàng bằng cách sử dụng Giao thức biên (BGP).

Bộ định tuyến trên đám mây có thể thiết lập một phiên BGP qua đường hầm Cloud VPN để kết nối các mạng của bạn. Trình quản lý tự động tìm hiểu các dải địa chỉ IP mạng con mới và thông báo các dải địa chỉ đó cho mạng ngang hàng.

Trong các bước sau, bạn sẽ triển khai VPN HA giữa VPC looker-psc-demo và VPC on-prem-demo để minh hoạ khả năng kết nối NEG kết hợp với onprem.database1.com.

Tạo HA VPN GW cho looker-psc-demo

Khi mỗi cổng được tạo, hai địa chỉ IPv4 bên ngoài sẽ tự động được phân bổ, mỗi địa chỉ cho một giao diện cổng.

Bên trong Cloud Shell, hãy tạo HA VPN GW:

gcloud compute vpn-gateways create looker-psc-demo-vpn-gw \
   --network=looker-psc-demo \
   --region=$region

Tạo HA VPN GW cho bản minh hoạ trên máy

Khi mỗi cổng được tạo, hai địa chỉ IPv4 bên ngoài sẽ tự động được phân bổ, mỗi địa chỉ cho một giao diện cổng.

Bên trong Cloud Shell, hãy tạo HA VPN GW:

gcloud compute vpn-gateways create on-prem-vpn-gw \
   --network=on-prem-demo\
   --region=$region

Xác thực việc tạo GW VPN HA

Trên bảng điều khiển, hãy chuyển đến mục KẾT NỐI KẾT HỢP → VPN → CỔNG VPN ĐÁM MÂY.

Tạo Trình định tuyến trên đám mây cho looker-psc-demo

Bên trong Cloud Shell, hãy tạo Trình định tuyến trên đám mây:

gcloud compute routers create looker-psc-demo-cr \
   --region=$region \
   --network=looker-psc-demo\
   --asn=65001

LƯU Ý: Trình định tuyến trên đám mây looker-psc-demo và Cloud NAT đã được tạo trước đó trong phần Tạo VPC của nhà sản xuất để hỗ trợ thực thể cơ sở dữ liệu postgres có thể tải các gói xuống.

Tạo đường hầm VPN cho looker-psc-demo

Bạn sẽ tạo hai đường hầm VPN trên mỗi cổng VPN HA.

Tạo đường hầm VPN0

Bên trong Cloud Shell, hãy tạo tunnel0:

gcloud compute vpn-tunnels create looker-psc-demo-tunnel0 \
    --peer-gcp-gateway on-prem-vpn-gw \
    --region $region \
    --ike-version 2 \
    --shared-secret [ZzTLxKL8fmRykwNDfCvEFIjmlYLhMucH] \
    --router looker-psc-demo-cr \
    --vpn-gateway looker-psc-demo-vpn-gw \
    --interface 0

Tạo đường hầm VPN1

Bên trong Cloud Shell, hãy tạo tunnel1:

gcloud compute vpn-tunnels create looker-psc-demo-tunnel1 \
    --peer-gcp-gateway on-prem-vpn-gw \
    --region $region \
    --ike-version 2 \
    --shared-secret [bcyPaboPl8fSkXRmvONGJzWTrc6tRqY5] \
    --router looker-psc-demo-cr \
    --vpn-gateway looker-psc-demo-vpn-gw \
    --interface 1

Tạo đường hầm VPN cho bản minh hoạ trên máy

Bạn sẽ tạo hai đường hầm VPN trên mỗi cổng VPN HA.

Tạo đường hầm VPN0

Bên trong Cloud Shell, hãy tạo tunnel0:

gcloud compute vpn-tunnels create on-prem-tunnel0 \
    --peer-gcp-gateway looker-psc-demo-vpn-gw \
    --region $region \
    --ike-version 2 \
    --shared-secret [ZzTLxKL8fmRykwNDfCvEFIjmlYLhMucH] \
    --router on-prem-cr \
    --vpn-gateway on-prem-vpn-gw \

   --interface 0

Tạo đường hầm VPN1

Bên trong Cloud Shell, hãy tạo tunnel1:

gcloud compute vpn-tunnels create on-prem-tunnel1 \
    --peer-gcp-gateway looker-psc-demo-vpn-gw \
    --region $region \
    --ike-version 2 \
    --shared-secret [bcyPaboPl8fSkXRmvONGJzWTrc6tRqY5] \
    --router on-prem-cr \
    --vpn-gateway on-prem-vpn-gw \
    --interface 1

Xác thực việc tạo đường hầm VPN

Trên bảng điều khiển, hãy chuyển đến mục KẾT NỐI KẾT HỢP → VPN → ĐƯỜNG ĂN VPN TRÊN ĐƯỜNG MÂY.

11. Thiết lập các máy chủ lân cận BGP

Tạo giao diện BGP và liên kết ngang cho looker-psc-demo

Bên trong Cloud Shell, hãy tạo giao diện BGP:

gcloud compute routers add-interface looker-psc-demo-cr \
    --interface-name if-tunnel0-to-onprem \
    --ip-address 169.254.1.1 \
    --mask-length 30 \
    --vpn-tunnel looker-psc-demo-tunnel0 \
    --region $region

Bên trong Cloud Shell, hãy tạo máy ngang hàng BGP:

gcloud compute routers add-bgp-peer looker-psc-demo-cr \
    --peer-name bgp-on-premises-tunnel0 \
    --interface if-tunnel1-to-onprem \
    --peer-ip-address 169.254.1.2 \
    --peer-asn 65002 \
    --region $region

Bên trong Cloud Shell, hãy tạo giao diện BGP:

gcloud compute routers add-interface looker-psc-demo-cr \
    --interface-name if-tunnel1-to-onprem \
    --ip-address 169.254.2.1 \
    --mask-length 30 \
    --vpn-tunnel looker-psc-demo-tunnel1 \
    --region $region

Bên trong Cloud Shell, hãy tạo máy ngang hàng BGP:

gcloud compute routers add-bgp-peer looker-psc-demo-cr \
    --peer-name bgp-on-premises-tunnel1 \
    --interface if-tunnel2-to-onprem \
    --peer-ip-address 169.254.2.2 \
    --peer-asn 65002 \
    --region $region

Tạo giao diện BGP và liên kết ngang cho bản minh hoạ trên máy chủ

Bên trong Cloud Shell, hãy tạo giao diện BGP:

gcloud compute routers add-interface on-prem-cr \
    --interface-name if-tunnel0-to-looker-psc-demo \
    --ip-address 169.254.1.2 \
    --mask-length 30 \
    --vpn-tunnel on-prem-tunnel0 \
    --region $region

Bên trong Cloud Shell, hãy tạo máy ngang hàng BGP:

gcloud compute routers add-bgp-peer on-prem-cr \
    --peer-name bgp-looker-psc-demo-tunnel0 \
    --interface if-tunnel1-to-looker-psc-demo \
    --peer-ip-address 169.254.1.1 \
    --peer-asn 65001 \
    --region $region

Bên trong Cloud Shell, hãy tạo giao diện BGP:

gcloud compute routers add-interface on-prem-cr \
    --interface-name if-tunnel1-to-looker-psc-demo \
    --ip-address 169.254.2.2 \
    --mask-length 30 \
    --vpn-tunnel on-prem-tunnel1 \
    --region $region

Bên trong Cloud Shell, hãy tạo máy ngang hàng BGP:

gcloud compute routers add-bgp-peer on-prem-cr \
    --peer-name bgp-looker-psc-demo-tunnel1\
    --interface if-tunnel2-to-looker-psc-demo \
    --peer-ip-address 169.254.2.1 \
    --peer-asn 65001 \
    --region $region

Chuyển đến KẾT NỐI HỖN HỢP → VPN để xem thông tin chi tiết về đường hầm VPN.

Xác thực các tuyến đã học của looker-psc-demo qua VPN HA

Giờ đây, khi các đường hầm VPN HA và phiên BGP đã được thiết lập, hành vi mặc định của Bộ định tuyến đám mây là quảng cáo các tuyến mạng con. Xem các tuyến đường đã học của looker-psc-demo.

Trên bảng điều khiển, hãy chuyển đến Mạng VPC → Mạng VPC → looker-psc-demo → TUYẾN → KHU VỰC → XEM

Quan sát looker-psc-demo đã học được database-subnet 192.168.10.0/28 từ VPC on-prem-demo.

Xác thực rằng VPC minh hoạ trên máy chủ đã học các tuyến qua VPN HA

Vì hành vi mặc định của Trình định tuyến đám mây là quảng cáo tất cả các mạng con, nên mạng con chỉ proxy được quảng cáo qua BGP. NEG kết hợp sẽ sử dụng mạng con chỉ dành cho proxy làm địa chỉ nguồn khi giao tiếp với máy chủ onprem.database1.com.

Quan sát on-prem-demo đã học proxy-only-subnet 10.10.10.0/24 từ looker-psc-demo.

Trên bảng điều khiển, hãy chuyển đến Mạng VPC → Mạng VPC → on-prem-demo → ROUTES → REGION → VIEW

12. Tạo cơ sở dữ liệu postgres-Looker

Trong phần sau, bạn sẽ thực hiện SSH vào máy ảo postgres-database bằng Cloud Shell.

Bên trong Cloud Shell, hãy thực hiện lệnh ssh đến phiên bản cơ sở dữ liệu postgres**:**

 gcloud compute ssh --zone "$zone" "postgres-database" --project "$project"

Bên trong hệ điều hành, hãy xác định và ghi lại địa chỉ IP (ens4) của thực thể cơ sở dữ liệu postgres:

ip a

Ví dụ:

1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN group default qlen 1000
    link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
    inet 127.0.0.1/8 scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::1/128 scope host noprefixroute 
       valid_lft forever preferred_lft forever
2: ens4: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1460 qdisc mq state UP group default qlen 1000
    link/ether 42:01:c0:a8:0a:04 brd ff:ff:ff:ff:ff:ff
    altname enp0s4
    inet 192.168.10.4/32 metric 100 scope global dynamic ens4
       valid_lft 66779sec preferred_lft 66779sec
    inet6 fe80::4001:c0ff:fea8:a04/64 scope link 
       valid_lft forever preferred_lft forever

Bên trong hệ điều hành, hãy đăng nhập vào postgresql:

sudo -u postgres psql postgres

Bên trong hệ điều hành, hãy nhập lời nhắc mật khẩu:

\password postgres

Bên trong hệ điều hành, hãy đặt mật khẩu thành postgres (nhập cùng một mật khẩu hai lần):

postgres

Ví dụ:

user@postgres-database:~$ sudo -u postgres psql postgres
\password postgres
psql (13.11 (Debian 13.11-0+deb11u1))
Type "help" for help.

postgres=# \password postgres
Enter new password for user "postgres": 
Enter it again: 

Bên trong hệ điều hành, hãy thoát khỏi postgres:

\q

Ví dụ:

postgres=# \q
user@postgres-database:~$ 

Trong phần sau, bạn sẽ chèn IP của thực thể cơ sở dữ liệu postgres (192.168.10.4) và mạng con chỉ dành cho proxy (10.10.10.0/24) vào tệp pg_hba.conf trong các kết nối cục bộ IPv4.

sudo nano /etc/postgresql/15/main/pg_hba.conf

Ảnh chụp màn hình bên dưới là nội dung cập nhật đã hoàn tất:

Trong phần sau, hãy bỏ ghi chú postgresql.conf để nghe tất cả địa chỉ IP "*" theo ảnh chụp màn hình bên dưới:

sudo nano /etc/postgresql/15/main/postgresql.conf

Trước:

Sau:

Bên trong hệ điều hành, hãy khởi động lại dịch vụ postgresql:

sudo service postgresql restart

Bên trong hệ điều hành, hãy xác thực trạng thái postgresql là đang hoạt động:

sudo service postgresql status

Ví dụ:

Bên trong hệ điều hành, hãy xác thực trạng thái postgresql là đang hoạt động:

user@postgres-database:/$ sudo service postgresql status
● postgresql.service - PostgreSQL RDBMS
     Loaded: loaded (/lib/systemd/system/postgresql.service; enabled; preset: enabled)
     Active: active (exited) since Mon 2024-09-02 12:10:10 UTC; 1min 46s ago
    Process: 20486 ExecStart=/bin/true (code=exited, status=0/SUCCESS)
   Main PID: 20486 (code=exited, status=0/SUCCESS)
        CPU: 2ms

Sep 02 12:10:10 postgres-database systemd[1]: Starting postgresql.service - PostgreSQL RDBMS...
Sep 02 12:10:10 postgres-database systemd[1]: Finished postgresql.service - PostgreSQL RDBMS.

13. Tạo cơ sở dữ liệu postgres

Trong phần sau, bạn sẽ tạo một cơ sở dữ liệu postgres có tên là postgres_looker và giản đồ looker_schema dùng để xác thực kết nối của Looker với mạng cục bộ.

Bên trong hệ điều hành, hãy đăng nhập vào postgres:

sudo -u postgres psql postgres

Bên trong hệ điều hành, hãy tạo cơ sở dữ liệu:

create database postgres_looker;

Bên trong hệ điều hành, hãy liệt kê cơ sở dữ liệu:

\l

Bên trong hệ điều hành, hãy tạo người dùng postgres_looker với mật khẩu postgreslooker:

create user postgres_looker with password 'postgreslooker';

Bên trong hệ điều hành, hãy kết nối với cơ sở dữ liệu:

\c postgres_looker;

Bên trong hệ điều hành, hãy tạo schema looker-schema và thoát đến lời nhắc Cloud Shell.

create schema looker_schema;
create table looker_schema.test(firstname CHAR(15), lastname CHAR(20));
exit

Exit from the OS, returning you to cloud shell:

\q

Ví dụ:

user@postgres-database:/$ sudo -u postgres psql postgres
psql (15.8 (Debian 15.8-0+deb12u1))
Type "help" for help.

postgres=# create database postgres_looker;
CREATE DATABASE
postgres=# \l
                                                List of databases
      Name       |  Owner   | Encoding | Collate |  Ctype  | ICU Locale | Locale Provider |   Access privileges   
-----------------+----------+----------+---------+---------+------------+-----------------+-----------------------
 postgres        | postgres | UTF8     | C.UTF-8 | C.UTF-8 |            | libc            | 
 postgres_looker | postgres | UTF8     | C.UTF-8 | C.UTF-8 |            | libc            | 
 template0       | postgres | UTF8     | C.UTF-8 | C.UTF-8 |            | libc            | =c/postgres          +
                 |          |          |         |         |            |                 | postgres=CTc/postgres
 template1       | postgres | UTF8     | C.UTF-8 | C.UTF-8 |            | libc            | =c/postgres          +
                 |          |          |         |         |            |                 | postgres=CTc/postgres
(4 rows)

postgres=# create user postgres_looker with password 'postgreslooker';
CREATE ROLE
postgres=# \c postgres_looker;
You are now connected to database "postgres_looker" as user "postgres".
postgres_looker=# create schema looker_schema;
create table looker_schema.test(firstname CHAR(15), lastname CHAR(20));
exit
CREATE SCHEMA
CREATE TABLE
postgres_looker-# \q

14. Tích hợp Looker với cơ sở dữ liệu postgres-database của Postgres

Trong phần sau, bạn sẽ sử dụng Looker Console để tạo một kết nối Cơ sở dữ liệu với thực thể cơ sở dữ liệu postgres tại chỗ.

Chuyển đến QUẢN TRỊ → CƠ SỞ DỮ LIỆU → KẾT NỐI → Chọn THÊM KẾT NỐI

Điền thông tin chi tiết về kết nối theo ảnh chụp màn hình bên dưới, chọn KẾT NỐI

• Đảm bảo khớp trường HOST (MÁY CHỦ) trong Looker Console với miền onprem.database1.com đã dùng trước đó trong hướng dẫn theo cú pháp bên dưới:

gcloud looker instances update looker-psc-instance –psc-service-attachment domain=onprem.database1.com,attachment=projects/$project/regions/$region/serviceAttachments/onpremdatabase1-svc-attachment –region=$region

• Tên người dùng cơ sở dữ liệu là "postgres_looker" và mật khẩu là "postgreslooker"

Kết nối hiện đã được định cấu hình

15. Xác thực khả năng kết nối của Looker

Trong phần sau, bạn sẽ tìm hiểu cách xác thực khả năng kết nối của Looker với cơ sở dữ liệu postgres trong on-prem-vpc bằng thao tác "kiểm thử" của Looker và TCPDUMP.

Trên Cloud Shell, hãy đăng nhập vào cơ sở dữ liệu postgres nếu phiên đã hết thời gian chờ.

Trong Cloud Shell, hãy thực hiện như sau:

gcloud config list project
gcloud config set project [YOUR-PROJECT-ID]
project=[YOUR-PROJECT-ID]
region=[YOUR-REGION]
zone=[YOUR-ZONE]
echo $project
echo $region

gcloud compute ssh --zone "$zone" "postgres-database" --project "$project"

Trên hệ điều hành, hãy tạo bộ lọc TCPDUMP với mạng con chỉ dành cho proxy 10.10.10.0/24

sudo tcpdump -i any net 10.10.10.0/24 -nn

LƯU Ý: Mạng con chỉ dành cho proxy được dùng làm IP nguồn để kiểm tra tình trạng và giao tiếp với cơ sở dữ liệu postgres cục bộ, onprem.database1.com. Do đó, nếu TCPDUMP không tạo lưu lượng truy cập, hãy đảm bảo bạn đã áp dụng thành công các quy tắc tường lửa.

Chuyển đến phần Kết nối dữ liệu ADMIN → DATABASE → CONNECTIONS → postgres-database → Test (QUẢN TRỊ → CƠ SỞ DỮ LIỆU → KẾT NỐI → cơ sở dữ liệu postgres → Kiểm thử)

Sau khi bạn chọn Test (Kiểm thử), Looker sẽ kết nối với cơ sở dữ liệu postgres như được chỉ định bên dưới:

Dọn dẹp

Xoá các thành phần của lớp học từ một thiết bị đầu cuối Cloud Shell

gcloud compute service-attachments delete onpremdatabase1-svc-attachment --region=$region -q

gcloud compute forwarding-rules delete producer-hybrid-neg-fr --region=$region -q

gcloud compute target-tcp-proxies delete producer-lb-tcp-proxy --region=$region -q

gcloud compute backend-services delete producer-backend-svc --region=$region -q

gcloud compute network-firewall-policies rules delete 2001 --firewall-policy looker-psc-demo-policy --global-firewall-policy -q

gcloud compute network-firewall-policies associations delete --firewall-policy=looker-psc-demo-policy  --name=looker-psc-demo --global-firewall-policy -q

gcloud compute network-firewall-policies delete looker-psc-demo-policy --global -q

gcloud compute routers nats delete on-prem-nat --router=on-prem-cr --router-region=$region -q

gcloud compute network-endpoint-groups delete on-prem-hybrid-neg --zone=$zone -q

gcloud compute addresses delete hybrid-neg-lb-ip --region=$region -q

gcloud compute vpn-tunnels delete looker-psc-demo-tunnel0 looker-psc-demo-tunnel1 on-prem-tunnel0 on-prem-tunnel1 --region=$region -q

gcloud compute vpn-gateways delete looker-psc-demo-vpn-gw on-prem-vpn-gw --region=$region -q

gcloud compute routers delete looker-psc-demo-cr on-prem-cr --region=$region -q

gcloud compute instances delete postgres-database --zone=$zone -q

gcloud compute addresses delete on-prem-database1-ip --region=$region -q

gcloud compute networks subnets delete database-subnet --region=$region -q

gcloud compute network-firewall-policies rules delete 2001 --firewall-policy on-prem-demo-policy --global-firewall-policy -q

gcloud compute network-firewall-policies rules delete 1000 --firewall-policy on-prem-demo-policy --global-firewall-policy -q

gcloud compute network-firewall-policies associations delete --firewall-policy=on-prem-demo-policy  --name=on-prem-demo --global-firewall-policy -q

gcloud compute networks subnets delete $region-proxy-only-subnet --region=$region -q

gcloud compute networks subnets delete producer-psc-nat-subnet --region=$region -q

gcloud compute networks subnets delete producer-psc-fr-subnet --region=$region -q

gcloud compute networks delete on-prem-demo -q

gcloud compute networks delete looker-psc-demo -q

16. Xin chúc mừng

Xin chúc mừng! Bạn đã định cấu hình và xác thực thành công khả năng kết nối với cơ sở dữ liệu tại chỗ qua HA-VPN bằng cách sử dụng Looker Console do Private Service Connect cung cấp.

Bạn đã tạo cơ sở hạ tầng nhà sản xuất, tìm hiểu cách tạo NEG kết hợp, Dịch vụ nhà sản xuất và điểm cuối PSC Looker cho phép kết nối với Dịch vụ nhà sản xuất.

Cosmopup cho rằng các lớp học lập trình rất tuyệt vời!!

Tiếp theo là gì?

Hãy xem một số lớp học lập trình này...

• Sử dụng Private Service Connect để phát hành và sử dụng dịch vụ
• Kết nối với các dịch vụ tại chỗ thông qua Mạng kết hợp bằng Private Service Connect và bộ cân bằng tải Proxy TCP nội bộ
• Quyền truy cập vào tất cả các lớp học lập trình về Private Service Connect đã xuất bản

Tài liệu đọc thêm và video

• Tổng quan về Private Service Connect

Tài liệu tham khảo

• Thiết lập Trình cân bằng tải mạng proxy nội bộ theo khu vực có khả năng kết nối kết hợp
• Tổng quan về Cloud NAT
• Tạo một thực thể Private Service Connect của Looker (hạt nhân Google Cloud)
• Cách phát hành dịch vụ bằng Private Service Connect
• Tổng quan về Cloud VPN