บังคับให้มีการอัปเดตการกระจาย / ไฟล์ของ CloudFront

ฉันใช้ CloudFront ของ Amazon เพื่อให้บริการไฟล์คงที่ของเว็บแอปของฉัน

ไม่มีวิธีใดที่จะบอกการกระจายของคลาวด์ฟรอนต์ว่าจำเป็นต้องรีเฟรชไฟล์หรือชี้ให้เห็นไฟล์เดียวที่ควรรีเฟรช?

Amazon แนะนำให้คุณปรับรุ่นไฟล์ของคุณเช่น logo_1.gif, logo_2.gif และอื่น ๆ เพื่อเป็นวิธีแก้ปัญหาสำหรับปัญหานี้ แต่ดูเหมือนว่าจะเป็นวิธีแก้ปัญหาที่ค่อนข้างโง่ ไม่มีทางอื่นหรือเปล่า?

ข่าวดี. ในที่สุด Amazon ก็เพิ่มคุณลักษณะการตรวจสอบความถูกต้อง ดูข้อมูลอ้างอิงของ API

นี่คือคำขอตัวอย่างจากการอ้างอิง API:

POST /2010-08-01/distribution/[distribution ID]/invalidation HTTP/1.0
Host: cloudfront.amazonaws.com
Authorization: [AWS authentication string]
Content-Type: text/xml

<InvalidationBatch>
   <Path>/image1.jpg</Path>
   <Path>/image2.jpg</Path>
   <Path>/videos/movie.flv</Path>
   <CallerReference>my-batch</CallerReference>
</InvalidationBatch>

ตั้งแต่วันที่ 19 มีนาคมขณะนี้ Amazon อนุญาตให้แคช TTL ของ Cloudfront เป็น 0 วินาทีดังนั้นคุณ (ตามหลักวิชา) ไม่ควรเห็นวัตถุค้างอยู่ ดังนั้นหากคุณมีสินทรัพย์ใน S3 คุณสามารถไปที่ AWS Web Panel => S3 => แก้ไขคุณสมบัติ => ข้อมูลเมตาจากนั้นตั้งค่า "การควบคุมแคช" เป็น "max-age = 0"

ตรงจากเอกสาร API :

ในการควบคุมว่า CloudFront จะแคชวัตถุหรือไม่และเราแนะนำให้คุณใช้ส่วนหัวของ Cache-Control กับ max-age = directive CloudFront แคชวัตถุตามจำนวนวินาทีที่ระบุ (ค่าต่ำสุดคือ 0 วินาที)

ด้วย Invalidation API มันจะได้รับการอัพเดตภายในไม่กี่นาที
ตรวจสอบPHP Invalidator

ตั้งค่าการอัพเดทอัตโนมัติใน 5 นาที

ตกลงเลย วิธีที่ดีที่สุดที่เป็นไปได้ในตอนนี้เพื่อทำการอัปเดต CloudFront อัตโนมัติ (การทำให้เป็นโมฆะ) คือการสร้างฟังก์ชั่นแลมบ์ดาที่จะถูกเรียกใช้ทุกครั้งเมื่อมีการอัปโหลดไฟล์ใด ๆ ลงในที่ฝากข้อมูล S3

แม้ว่าคุณจะไม่เคยใช้ฟังก์ชั่นแลมบ์ดามาก่อนมันเป็นเรื่องง่าย - เพียงทำตามคำแนะนำทีละขั้นตอนและใช้เวลาเพียง 5 นาที:

ขั้นตอนที่ 1

ไปที่https://console.aws.amazon.com/lambda/homeและคลิกสร้างฟังก์ชั่นแลมบ์ดา

ขั้นตอนที่ 2

คลิกที่ฟังก์ชันว่าง (กำหนดเอง)

ขั้นตอนที่ 3

คลิกที่ช่องว่าง (ลูบ) และเลือกS3จากคำสั่งผสม

ขั้นตอนที่ 4

เลือกของคุณBucket (เช่นเดียวกับการกระจาย CloudFront)

ขั้นตอนที่ 5

ตั้งค่าประเภทเหตุการณ์เป็น "วัตถุที่สร้าง (ทั้งหมด)"

ขั้นตอนที่ 6

ตั้งค่าคำนำหน้าและคำต่อท้ายหรือปล่อยว่างถ้าคุณไม่รู้ว่ามันคืออะไร

ขั้นตอนที่ 7

ตรวจสอบการเปิดใช้ทริกเกอร์และคลิกถัดไป

ขั้นตอนที่ 8

ตั้งชื่อฟังก์ชั่นของคุณ (เช่นYourBucketNameS3ToCloudFrontOnCreateAll )

ขั้นตอนที่ 9

เลือกPython 2.7 (หรือใหม่กว่า) เป็นRuntime

ขั้นตอนที่ 10

วางรหัสต่อไปนี้แทนรหัสไพ ธ อนเริ่มต้น:

from __future__ import print_function

import boto3
import time

def lambda_handler(event, context):
    for items in event["Records"]:
        path = "/" + items["s3"]["object"]["key"]
        print(path)
        client = boto3.client('cloudfront')
        invalidation = client.create_invalidation(DistributionId='_YOUR_DISTRIBUTION_ID_',
            InvalidationBatch={
            'Paths': {
            'Quantity': 1,
            'Items': [path]
            },
            'CallerReference': str(time.time())
            })

ขั้นตอนที่ 11

เปิดhttps://console.aws.amazon.com/cloudfront/homeในแท็บเบราว์เซอร์ใหม่และคัดลอก ID การแจกจ่าย CloudFront ของคุณเพื่อใช้ในขั้นตอนต่อไป

ขั้นตอนที่ 12

กลับไปที่แลมบ์ดาแท็บและวางรหัสการแจกจ่ายของคุณแทน _YOUR_DISTRIBUTION_ID_ ในรหัสไพ ธ อน เก็บคำพูดโดยรอบ

ขั้นตอนที่ 13

ตั้งค่าตัวจัดการ : lambda_function.lambda_handler

ขั้นตอนที่ 14

คลิกที่บทบาท ComboBox และเลือกสร้างบทบาทที่กำหนดเอง แท็บใหม่ในเบราว์เซอร์จะถูกเปิด

ขั้นตอนที่ 15

คลิกดูเอกสารนโยบายคลิกแก้ไขคลิกตกลงและแทนที่การกำหนดบทบาทด้วยคำสั่งต่อไปนี้ (ตามสภาพ):

{
  "Version": "2012-10-17",
  "Statement": [
    {
      "Effect": "Allow",
      "Action": [
        "logs:CreateLogGroup",
        "logs:CreateLogStream",
        "logs:PutLogEvents"
      ],
      "Resource": "arn:aws:logs:*:*:*"
    },
    {
      "Effect": "Allow",
      "Action": [
          "cloudfront:CreateInvalidation"
      ],
      "Resource": [
          "*"
      ]
    }
  ]
}

ขั้นตอนที่ 16

คลิกอนุญาต สิ่งนี้จะนำคุณกลับสู่แลมบ์ดา ตรวจสอบอีกครั้งว่าชื่อบทบาทที่คุณเพิ่งสร้างนั้นถูกเลือกในบทบาทที่มีอยู่ Combobox

ขั้นตอนที่ 17

ตั้งค่าหน่วยความจำ (MB)ถึง 128 และหมดเวลาเป็น 5 วินาที

ขั้นตอนที่ 18

คลิกถัดไปจากนั้นคลิกสร้างฟังก์ชั่น

ขั้นตอนที่ 19

คุณสบายดี! ในตอนนี้ทุกครั้งที่คุณจะอัปโหลด / อัปโหลดไฟล์ใด ๆ ไปยัง S3 ใหม่จะมีการประเมินในทุกสถานที่ของ CloudFront Edge

ป.ล. - เมื่อคุณทำการทดสอบตรวจสอบให้แน่ใจว่าเบราว์เซอร์ของคุณกำลังโหลดภาพจาก CloudFront ไม่ใช่จากแคชในเครื่อง

PSS - โปรดทราบว่าการตรวจสอบความถูกต้อง 1,000 ไฟล์แรกต่อเดือนนั้นจะไม่เสียค่าใช้จ่ายแต่ละการตรวจสอบจะมีค่าเกิน $ 0.005 USD อาจมีค่าใช้จ่ายเพิ่มเติมสำหรับฟังก์ชั่นแลมบ์ดา แต่มันราคาถูกมาก

Bucket Explorerมี UI ที่ทำให้ใช้งานได้ง่ายในตอนนี้ นี่คือวิธี:

คลิกขวาที่ฝากข้อมูลของคุณ เลือก "จัดการการกระจาย"
คลิกขวาที่การกระจายของคุณ เลือก "รับรายการทำให้ใช้งานไม่ได้ Cloudfront" จากนั้นเลือก "สร้าง" เพื่อสร้างรายการตรวจสอบใหม่ เลือกไฟล์ที่จะทำให้เป็นโมฆะและคลิก "ทำให้เป็นโมฆะ" รอ 5-15 นาที

หากคุณติดตั้งbotoไว้ (ซึ่งไม่ได้มีไว้สำหรับไพ ธ อนเท่านั้น แต่ยังติดตั้งยูทิลิตีบรรทัดคำสั่งที่มีประโยชน์) มันมีบรรทัดคำสั่งที่ใช้เรียกเฉพาะcfadminหรือ 'cloud front admin' ซึ่งมีฟังก์ชั่นต่อไปนี้:

Usage: cfadmin [command]
cmd - Print help message, optionally about a specific function
help - Print help message, optionally about a specific function
invalidate - Create a cloudfront invalidation request
ls - List all distributions and streaming distributions

คุณเรียกใช้สิ่งต่าง ๆ ด้วยการเรียกใช้:

$sam# cfadmin invalidate <distribution> <path>

เพียงแค่โพสต์เพื่อแจ้งให้ทุกคนที่เข้าชมหน้านี้ (ผลลัพธ์แรกใน 'การรีเฟรชไฟล์ Cloudfront') ว่ามีตัวตรวจสอบความถูกต้องออนไลน์ที่ใช้งานง่าย + เข้าถึงได้ที่ swook.net

เครื่องมือตรวจสอบความถูกต้องใหม่นี้คือ:

• ออนไลน์เต็มรูปแบบ (ไม่มีการติดตั้ง)
• มีให้บริการ 24x7 (โฮสต์โดย Google) และไม่ต้องการสมาชิกใด ๆ
• มีการสนับสนุนประวัติและการตรวจสอบเส้นทางเพื่อให้คุณทำให้ไฟล์ใช้งานไม่ได้อย่างง่ายดาย (บ่อยครั้งด้วยการคลิกเพียงไม่กี่ครั้งหลังจากตรวจสอบความถูกต้องเป็นครั้งแรก!)
• นอกจากนี้ยังเป็นที่เชื่อถือได้มากที่สุดเท่าที่คุณจะพบว่าเมื่อมีการอ่านของตนโพสต์ปล่อย

การเปิดเผยแบบเต็ม: ฉันทำสิ่งนี้ มีความสุข!

วิธีหนึ่งที่ง่ายมากที่จะทำคือการกำหนดเวอร์ชันของ FOLDER

ดังนั้นหากไฟล์สแตติกของคุณมีหลายร้อยตัวให้วางทั้งหมดไว้ในโฟลเดอร์ที่เรียกว่าตามปี + เวอร์ชัน

ตัวอย่างเช่นฉันใช้โฟลเดอร์ชื่อ 2014_v1 ภายในที่ฉันมีไฟล์คงที่ทั้งหมดของฉัน ...

ดังนั้นภายใน HTML ของฉันฉันมักจะใส่การอ้างอิงไปยังโฟลเดอร์ (แน่นอนฉันมี PHP รวมถึงที่ฉันได้ตั้งชื่อของโฟลเดอร์.) ดังนั้นโดยการเปลี่ยนใน 1 ไฟล์มันเปลี่ยนจริงในทุกไฟล์ PHP ของฉัน ..

หากฉันต้องการการรีเฟรชที่สมบูรณ์ฉันเพียงแค่เปลี่ยนชื่อโฟลเดอร์เป็น 2014_v2 เป็นแหล่งข้อมูลของฉันและเปลี่ยนภายใน php include เป็น 2014_v2

HTML ทั้งหมดเปลี่ยนโดยอัตโนมัติและขอเส้นทางใหม่แคช MISS บนคลาวด์และขอไปยังแหล่งที่มา

ตัวอย่าง: SOURCE.mydomain.com เป็นแหล่งที่มาของฉัน cloudfront.mydomain.com คือ CNAME ไปยังการกระจาย cloudfront

ดังนั้น PHP จึงเรียกไฟล์นี้ cloudfront.mydomain.com/2014_v1/javascript.js และเมื่อฉันต้องการรีเฟรชแบบเต็มฉันเพียงแค่เปลี่ยนชื่อโฟลเดอร์เป็นแหล่งที่มาเป็น "2014_v2" และฉันเปลี่ยน PHP รวมโดยการตั้งค่าโฟลเดอร์เป็น "2014_v2" .

เช่นนี้ไม่มีความล่าช้าในการตรวจสอบความถูกต้องและไม่มีค่าใช้จ่าย!

นี่เป็นโพสต์แรกของฉันใน stackoverflow หวังว่าฉันทำได้ดี!

ตั้งค่า TTL = 1 ชั่วโมงและแทนที่

http://developer.amazonwebservices.com/connect/ann.jspa?annID=655

ในทับทิมใช้พลอยหมอก

AWS_ACCESS_KEY = ENV['AWS_ACCESS_KEY_ID']
AWS_SECRET_KEY = ENV['AWS_SECRET_ACCESS_KEY']
AWS_DISTRIBUTION_ID = ENV['AWS_DISTRIBUTION_ID']

conn = Fog::CDN.new(
    :provider => 'AWS',
    :aws_access_key_id => AWS_ACCESS_KEY,
    :aws_secret_access_key => AWS_SECRET_KEY
)

images = ['/path/to/image1.jpg', '/path/to/another/image2.jpg']

conn.post_invalidation AWS_DISTRIBUTION_ID, images

แม้ในการทำให้ใช้ไม่ได้จะใช้เวลา 5-10 นาทีในการทำให้การประมวลผลและการรีเฟรชบนเซิร์ฟเวอร์ amazon edge ทั้งหมด

AWS CLI ปัจจุบันสนับสนุนการตรวจสอบความถูกต้องในโหมดดูตัวอย่าง รันสิ่งต่อไปนี้ในคอนโซลของคุณหนึ่งครั้ง:

aws configure set preview.cloudfront true

ฉันปรับใช้โครงการเว็บของฉันโดยใช้ npm ฉันมีสคริปต์ต่อไปนี้ในของฉันpackage.json:

{
    "build.prod": "ng build --prod --aot",
    "aws.deploy": "aws s3 sync dist/ s3://www.mywebsite.com --delete --region us-east-1",
    "aws.invalidate": "aws cloudfront create-invalidation --distribution-id [MY_DISTRIBUTION_ID] --paths /",
    "deploy": "npm run build.prod && npm run aws.deploy && npm run aws.invalidate"
}

มีสคริปต์ข้างต้นในสถานที่ที่คุณสามารถปรับใช้เว็บไซต์ของคุณด้วย:

npm run deploy

หากคุณใช้ AWS คุณอาจใช้เครื่องมือทางการของ CLI (ไม่ช้าก็เร็ว) AWS CLI เวอร์ชั่น 1.9.12ขึ้นไปรองรับการทำให้รายชื่อไฟล์ไม่ถูกต้อง

การเปิดเผยแบบเต็ม: ฉันทำสิ่งนี้ มีความสุข!

ไปที่ CloudFront

คลิกที่ ID / ดิสทริบิวชันของคุณ

คลิกที่การยกเลิก

คลิกสร้างการยกเลิก

ในช่องตัวอย่างขนาดยักษ์พิมพ์ * และคลิกใช้งานไม่ได้

เสร็จสิ้น