[腾讯云/COS/CDN]对象存储和CDN配合

前言

云服务器用起来感觉最难受的就是带宽了，国内的云服务器普遍带宽都很小，但买国外或者香港的话延迟大还容易被封IP。一般网站/app最占带宽的是图片和音视频等文件的上传下载，下面我们要聊的cos和cdn就是解决这个问题来的。

简介

对象存储COS

对象存储不同于我们平时操作系统里的文件存储，它就像一个map，存储的所有文件都有一个唯一的名称作为key，文件内容作为value。而没有目录的概念。
这样做的意义在于，当文件很多，目录结构深时，文件存储需要根据那颗目录树一步一步找到文件，显然是比对象存储直接按文件名一步到位得到要来得慢。
但目前很多云服务厂商都有在对象存储上提供目录功能，这大多是模拟出来的。比如腾讯云是将文件名中的 / 识别为目录模拟得到的。
- 比如：放进两个文件：
- aaa.txt
- wow/abc.cpp
- 由于 "wow/abc.cpp" 的文件名带有 / ，则可以模拟解析为是放在wow目录下，存在一个文件叫abc.cpp。
我们使用云服务提供的COS来替换我们的服务器实现文件的上传和下载。一般云服务COS不限制下载速度，且用户上传也免费。但用户的下载流量、存储空间占用、请求次数是要收钱的。
- 注意这不是三选一的问题，是三个方面都要收钱的！
- 比如：在一个月的时间里，我们向COS上传了 100 MB 文件，发送过 1 w 次读写请求，且用户外网下载文件使用过 10G 的流量。
- 那么结算时，需要支付：A + B + C
  - A：100M/1个月的存储空间占用费用
  - B：1w次读取请求费用
  - C：外网下载 10 G 流量费用
- 显然，外网下载流量很容易被人攻击，盗刷流量，然后疯狂扣流量包扣费，容易出现一觉醒来，没了一套海景房的刺激。后面我们用CDN来防止一部分攻击，因为COS的流量费比CDN贵非常多，而且CDN能设置更多的访问限制，降低被攻击的损失，所以可以用CDN抗在前面。

CDN

cdn的用途很广泛，由于用户在地域上分布全国甚至全球各地，而我们的服务器一般是只在一个或几个地方而已，cdn在地域上可以分散多个节点，作为一个中间人，缓存用户访问服务器上的文件，并在用户下一次请求这个文件时，cdn就可以直接提供给用户，而不需要大老远来请求服务器，提高用户的访问速度。
这里我们可以利用这个特性，且其价格低，来帮助COS降低被攻击的损失。

使用问题

盗刷COS流量

前面我们已经提到，COS的外网下载流量是比较贵的，而且速度快，容易被攻击刷流量。
解决办法：
- 把COS访问权限设置为私有读私有写
- 当用户需要上传文件时，使用云厂商提供的SDK，服务端预签名上传文件的URL，并将签名后的链接发送给用户，客户端只能按照签名链接指定参数、请求头、请求类型的上传文件到COS，上传不需要使用CDN。
- 当用户需要下载时，使用SDK获取COS上对应文件名的文件链接，并将链接的域名替换为CDN的域名，然后返回替换后的链接给用户下载文件，并在CDN设置限制IP访问速度、下载速度等限制即可。

防盗链/限速

由于浏览器不允许伪造请求头中的Referer、Host、Origin，因此可以在CDN/COS都配置防盗链，限制请求的Referer。这个可以阻止别人的网站直接把你的资源链接放到他的网站使用的情况，减少一些被偷资源流量的问题，但他直接下载你的资源然后上传到他的服务器还是可以的。
注意网页是可以指定浏览器不携带Referer的，即请求是空Referer。而在浏览器直接敲网址进入网页时的请求也是空Referer，你需要考虑是否需要允许空Referer的请求。防盗链挡不住客户端请求，因为客户端是可以随意伪造请求中的任意值的。如APP、nodejs、命令行、服务端程序等，只要是非标准浏览器环境就可以随意伪造。
在CDN中，可以限制下载速度、IP访问速度等。

https网站中使用http资源

由于CDN的Https目前很多云厂商是收费的，虽然不贵，但也是钱。
如果你CDN访问使用了http，但网站是https协议时，直接在https网站里获取http资源（图片、音视频等）会被浏览器认为是不安全的，并在浏览器的开发者工具中打印警告，但也是能用的。但默认不会带上Referer，因此如果你设置了防盗链不允许空Referer的话，就有问题了，这个时候可以在网页的<head></head>中添加配置：<meta content="always" name="referrer" >，这样浏览器在获取Http资源时也会带上Referer了
https网站中发起http请求是不允许的！

上传文件大小/数量限制

用户向我们的服务端申请用于上传文件的预签名URL时，需要携带参数：文件大小、文件MD5，然后我们可以指定该链接发送时必须携带：
- Content-Length=500
- x-cos-meta-md5: {文件md5值}
- 由此就可以防止用户拿到预签名URL后，上传了其他文件的问题
文件大小限制，就是在我们服务端给预签名URL时进行检查。
文件数量限制，可以将用户、IP获取上传链接时写入数据库记录，根据这个记录来设计用户上传文件的数量和总大小等。

腾讯云COS的SDK/c++

整了老半天，终于写好了cmakelist能编译运行release，但debug版一直找不到链接符号。
看了大概是因为他是SDK源码里有一个文件夹three-party存放了已经编译好的第三方依赖库，但这些库是release的，因此需要我们编译debug的依赖库。但我的项目里也依赖openssl，改来改去才能release，最终debug版放弃了。
后来开始用上go了，学1天然后上手引入他的sdk和框架开发完cos相关的接口。有c基础还是很快上手的。

Mazrvxg说道：

2024年7月27日上午12:53

Добрый день!
Официальная покупка диплома ПТУ с упрощенной программой обучения
poobshchaemsya.ru/gallery/image/kakie-magaziny-s-diplomami-na-tekuschiy-den-imeyutsya-356/

回复
https://www.ebrodnica.pl说道：

2024年7月27日上午12:38

Passion the site– extremely individual pleasant and great deals to
see!
https://www.ebrodnica.pl

回复
https://warszawa24.ovh说道：

2024年7月27日上午12:35

say thanks to so much for your internet site it assists a lot.

https://warszawa24.ovh

回复
https://ekutno.pl说道：

2024年7月27日上午12:34

I love looking through your internet site.
Thanks for your time!
https://ekutno.pl

回复
сантехника новосибирск купить说道：

2024年7月27日上午12:27

Если вы живете в Казани, можно
сантехника купить казань в нашем интернет-магазине.
Мы предлагаем широкий ассортимент товаров по доступным
ценам.

回复
https://www.tv.starachowice.pl说道：

2024年7月27日上午12:13

Thanks, this website is really helpful.
https://www.tv.starachowice.pl

回复
https://www.kopalniapracy.pl说道：

2024年7月26日下午11:59

Thanks a lot! It a very good web-site!
https://www.kopalniapracy.pl

回复
https://www.igryfino.pl说道：

2024年7月26日下午11:53

I appreciate the content on your web sites. Thank you.

https://www.igryfino.pl

回复
mojetychy.pl说道：

2024年7月26日下午11:46

You’re a very helpful web site; couldn’t make it without ya!

mojetychy.pl

回复
Uazrvjb说道：

2024年7月26日下午11:37

Добрый день!
Заказать диплом любого университета.
shop.robrowser.net/index.php?/files/file/40-%D0%B4%D0%B8%D0%BF%D0%BB%D0%BE%D0%BC%D1%8B-%D0%B0%D1%82%D1%82%D0%B5%D1%81%D1%82%D0%B0%D1%82%D1%8B-%D0%B8-%D1%81%D0%B5%D1%80%D1%82%D0%B8%D1%84%D0%B8%D0%BA%D0%B0%D1%82%D1%8B-%D0%B2-%D0%B7%D0%BD%D0%B0%D0%BC%D0%B5%D0%BD%D0%B8%D1%82%D0%BE%D0%BC-%D0%B8%D0%BD%D1%82%D0%B5%D1%80%D0%BD%D0%B5%D1%82-%D0%BC%D0%B0%D0%B3%D0%B0%D0%B7%D0%B8%D0%BD%D0%B5/

回复
https://www.telewizjazary.pl说道：

2024年7月26日下午11:27

I love the information on your internet site.

Thank you so much!
https://www.telewizjazary.pl

回复
JoshuaRef说道：

2024年7月26日下午11:21

Україна останні новини https://lentanews.kyiv.ua головні новини та останні події

回复
RobertZes说道：

2024年7月26日下午11:20

זהו מקום בילוי המעניק לא רק תנאים נוחים אלא גם דיסקרטיות מלאה המתאימה לצרכים של אנשי עסקים וגברים שלהם חשובה הדיסקרטיות. דירות נערה שתפנק אותך ותגרום לך להרגיש טוב. נצל את ההזדמנות ובלה עם הנערות היפות ביותר שיש. נערות סקסיות שרק רוצות לפנק גברים ללא why not find out more

回复
Galileo Fx说道：

2024年7月26日下午11:16

I couldn’t resist commenting. Perfectly written!

回复
https://tugrodzisk.pl说道：

2024年7月26日下午11:14

Thanks, this website is extremely useful.
https://tugrodzisk.pl

回复
Alice Greer说道：

2024年7月26日下午11:13

I just like the helpful information you provide in your articles

回复
rudaslaska.com.pl说道：

2024年7月26日下午11:00

Good Website, Continue the great job. Thanks a lot.
rudaslaska.com.pl

回复
instagram turk takipci satin al说道：

2024年7月26日下午10:56

instagram turk takipci satin al

回复
https://naszepiaseczno.pl说道：

2024年7月26日下午10:40

I delight in the knowledge on your websites. Thnx!

https://naszepiaseczno.pl

回复
https://wodzislaw.com.pl说道：

2024年7月26日下午10:34

Fantastic Web page, Carry on the very good work.
Thanks.
https://wodzislaw.com.pl

回复
Davidanymn说道：

2024年7月26日下午10:28

Свіжі новини України https://lenta.kyiv.ua останні новини з-за кордону, новини політики, економіки, спорту, культури.

回复
RogelioLah说道：

2024年7月26日下午10:24

Онлайн-платформа для азартных игр представляет собой разнообразный мир развлечений. Здесь игроки могут наслаждаться множеством опций, которые сделают времяпрепровождение увлекательным и захватывающим http://studio-azhur.ru/index.php?option=com_k2&view=itemlist&task=user&id=54602

回复
https://nasz-szczecin.pl说道：

2024年7月26日下午10:04

Maintain the exceptional job !! Lovin’ it!

https://nasz-szczecin.pl

回复
Stephenlep说道：

2024年7月26日下午9:55

Популярные репортажи https://infotolium.com в больших фотографиях, новости, события в мире

回复
KennethAgrip说道：

2024年7月26日下午9:54

Україна свіжі новини https://kiev-pravda.kiev.ua останні події на сьогодні

回复
EddieFer说道：

2024年7月26日下午9:52

Новини України https://kiev-online.com.ua останні події в Україні та світі сьогодні, новини України за минулий день онлайн

回复
ラブドールエロ说道：

2024年7月26日下午9:34

After producing rates,the insurer will use discretion to reject or settle for risks via the underwriting process.セックスドール

回复
ラブドールエロ说道：

2024年7月26日下午9:31

and I was wanting to know your situation; we have developed some nice methods and we are looking to exchange techniques withother folks,セックスドールbe sure to shoot me an emailif interested.

回复
ラブドールエロ说道：

2024年7月26日下午9:28

ダッチワイフThe real truth was that I wasn’t missing out on anything.I had amazing,

回复
https://www.tvsudecka.pl说道：

2024年7月26日下午8:45

The material is rather useful.
https://www.tvsudecka.pl

回复
John说道：

2024年7月26日下午8:42

Aw, this was a very nice post. Finding the time and actual effort to produce a top notch article… but what can I say… I hesitate a whole lot and never seem to get anything done.

回复
Dnrtdba说道：

2024年7月26日下午8:37

Привет!
Заказать документ о получении высшего образования можно у нас в столице.
ast-diplomas.com/kupit-diplom-sankt-peterburg
Успехов в учебе!

回复
Mazrrab说道：

2024年7月26日下午8:32

Здравствуйте!
Сколько стоит диплом высшего и среднего образования и как его получить?
saltandsweetsaftab.com/2024/06/30/купить-диплом-молдавии/

回复
Robert说道：

2024年7月26日下午8:13

Принимать финансовые решения может быть сложно. Но с нашим каталогом финансовых продуктов это стало проще, чем когда-либо!
долгосрочный кредит
Мы собрали все лучшие финансовые продукты в одном месте, чтобы вы могли легко сравнить их и найти те, которые подходят именно вам. Наши экспертные обзоры и рейтинги помогут вам принять обоснованное решение, соответствующее вашим уникальным потребностям.
Независимо от того, ищете ли вы кредит наличными, дебетовую карту или инвестиционный счет, наш каталог финансовых продуктов поможет вам сделать правильный выбор.

回复
ورق استیل 321说道：

2024年7月26日下午8:04

ورق استیل 2 میل

回复
Jamesvaf说道：

2024年7月26日下午7:37

Останні новини України https://gromrady.org.ua сьогодні онлайн – головні події світу

回复
Diplomi_ecol说道：

2024年7月26日下午7:20

Привет!
Купить документ ВУЗа вы можете у нас.
ast-diplomy.com/kupit-diplom-specialista

回复
spincasino-slot.com说道：

2024年7月26日下午6:38

가네샤 골드
양야의 얼굴은 잿빛이었지만 반박할 수는 없었다.

回复
HarrySwice说道：

2024年7月26日下午6:29

Новинний ресурс https://actualnews.kyiv.ua про всі важливі події в Україні та світі.

回复
RobertArith说道：

2024年7月26日下午6:25

Новини сьогодні https://gau.org.ua останні новини України та світу онлайн

回复
WilliamKeeno说道：

2024年7月26日下午6:14

seo продвижение сайта заказать в казани https://seooptimizatsia.ru

回复
BrandonSaili说道：

2024年7月26日下午6:10

недорогое сео продвижение сайта https://seo-optimizatsia.ru

回复
IrvingTrith说道：

2024年7月26日下午5:09

בדירות הדיסקרטיות תוכל למצוא נערות בעלות מראה שיגרום לך להתרגש. לכולן גוף סקסי ומפתה, מהסוג שאתה רגיל לראות רק בסרטים. ולא רק אחרת. אבל לכולן משותף הגוף המושלם. גוף שעושה לך חשק רק לגעת ולקבל ממנו עוד ועוד. אם זה הישבן העסיסי החזה השופע או שניהם ביחד – שירותי ליווי באילת

回复
5 star hotels in istanbul turkey说道：

2024年7月26日下午5:08

5 star hotels in istanbul turkey

Its not my first time to visit this site, i am browsing this site dailly and get nice
information from here everyday.

回复
슬롯说道：

2024年7月26日下午3:24

온라인 슬롯 게임 추천
아니나 다를까 이 내시가 제일 잘한다.

回复
PhilipJerge说道：

2024年7月26日下午2:48

Интерьерная печать на самоклеющейся пленке – это процесс создания качественных полноцветных изображений на самоклеющейся пленке, которая может быть наклеена на различные поверхности печать интерьерных постеров

回复
Foxibet说道：

2024年7月26日下午2:33

Greetings from Carolina! I’m bored to tears at work so I decided to browse your
site on my iphone during lunch break. I love the knowledge you present here and can’t
wait to take a look when I get home. I’m surprised
at how fast your blog loaded on my cell phone .. I’m not even using WIFI, just
3G .. Anyways, very good blog!

回复
Sahabet说道：

2024年7月26日下午2:20

Thank you great posting about essential oil. Hello Administ . Seo Paketi Skype: By_uMuT@KRaLBenim.Com -_- live:by_umut

回复
Sahabet说道：

2024年7月26日下午2:20

Hello! I could have sworn I’ve been to this blog before but after browsing through some of the post I realized it’s new to me.Seo Paketi Skype: By_uMuT@KRaLBenim.Com -_- live:by_umut

回复
ShawnGoabs说道：

2024年7月26日下午2:11

שתתפרק מרוב עונג. ואתה יודע מה הכי כיף? ניתן ליהנות מהשירות של דירות דיסקרטיות בבאר שבע בכל יום ובכל שעה. לא משנה אם זה סוף צריכים לדפוק חשבון לאף אחד, אבל דיסקרטיות היא דבר חשוב. הרי מה שאתם עושים בזמנכם הוא עניין פרטי שלכם ולא של אף אחד אחר. Tel Aviv escorts services for men seeking love

回复

前言

简介

对象存储COS

CDN

使用问题

盗刷COS流量

防盗链/限速

https网站中使用http资源

上传文件大小/数量限制

腾讯云COS的SDK/c++

发表回复 取消回复

发表回复取消回复