搜档网
当前位置:搜档网 › 阿里云ODPS初探

阿里云ODPS初探

阿里云ODPS初探
阿里云ODPS初探

细数阿里云服务器的十二种典型应用场景

细数阿里云服务器的十二种典型应用场景 本文章来自于阿里云云栖社区 摘要:文章转载:小白杨1990 如今,阿里云的产品可谓是多种多样,纷繁复杂。面对各种各样的技术和产品,ECS、RDS、OSS…等等一系列的东西,很容易让人找不到头绪,尤其是刚刚开始接触网站建设的朋友。阿里云湖北授权服务中心武汉捷讯结合阿里云官网的资料,针对建站相关的内容为大家整理一些阿里云典型的应用场景 免费开通大数据服务:https://https://www.sodocs.net/doc/c9650324.html,/product/odps 文章转载:小白杨1990 如今,阿里云的产品可谓是多种多样,纷繁复杂。面对各种各样的技术和产品,ECS、RDS、OSS…等等一系列的东西,很容易让人找不到头绪,尤其是刚刚开始接触网站建设的朋友。阿里云湖北授权服务中心武汉捷讯结合阿里云官网的资料,针对建站相关的内容为大家整理一些阿里云典型的应用场景,以及每一种应用场景主要涉及的技术,给大家提供一个参考。相信看完本文,大家都能清楚的知道自己要实现的应用大概会需要用到什么样的服务和产品。 典型应用一些典型应用中可能涉及到的产品和概念 (一)一站式建站

阿里云提供域名和云解析服务,云市场还提供全程建站服务。小型网站只需一台云服务器ECS即可。 1、域名注册:国内域名市场NO.1,19年专业域名服务,超30种域名供您选择; 2、云解析:提供安全、稳定、极速的域名解析服务,每天超百亿次解析响应; 3、免费备案:人脸识别,备多久云服务器免费送多久; 4、建站服务:服务全程监管,不满意全额退款; 5、云服务器:可弹性伸缩、安全稳定、简单易用。 (二)随时灵活扩展 建议使用过弹性伸缩结合云服务器,实现在业务增长/下降时自动增加/减少云服务器实例。 1、网站初始阶段访问量小,应用程序、数据库、文件等所有资源均在一台云服务器上,节省初创成本; 2、用户使用镜像可免安装快速部署,提供php、Java、asp、https://www.sodocs.net/doc/c9650324.html,等运行环境; 3、当您开始营销推广,网站流量可能会出现成倍的增幅,使用台云服务器可以在几分钟内完成扩容,轻松应对,搭配负载均衡,实现水平扩容; 4、如果你的业务存在明显的波峰/谷,或无法预估流量波动,建议使用过弹性伸缩,实现在业务增长/下降时自动增加/减少云服务器实例。

阿里云计算之弹性计算服务

阿里云计算之弹性计算服务 作者:机房360 出处:论坛2012-10-30 16:40 云计算的核心价值在于提供了新的应用开发和运营模式,是下一代互联网、物联网和移动互联网的基础,全球信息领域的主要厂商都在围绕云计算重新布局,并必将影响到全社会的方方面面。 可以将“云”看作一个易于使用与访问的巨大虚拟资源池(如硬件、开发平台或服务等),这些资源可以根据负载(规模)的变化而动态配置,以最优地利用资源[1]。云计算主要具有以下一些特点: 大规模:云计算服务通常由运行在多个数据中心的集群系统提供,每个数据中心节点可达到上万台,为各种不同的应用提供海量计算和存储资源。 低成本:云计算通过资源虚拟化的方式为用户提供可伸缩的资源,支持各种不同类型的应用同时在系统中运行,提高整体的资源利用率,从而降低成本。 高可靠:云计算可多份存储用户数据,任意一台物理机的损坏都丢失用户数据,多数据中心的设计也满足了灾备的需求。 目前,业界云计算最领先的是Amazon和Google,其中,Amazon真正实现了计算的Utility化,而Google真正从技术上实现了大规模的计算。阿里云的战略是实现AmazonGoogle并有所超越,成为中国拥有最大计算能力的公司。为此,阿里云开放了包括弹性计算服务(ElasticComputeService,ECS)[2]、开放存储服务(OpenStorageService,OSS)[3]、关系型数据库服务(RelationalDatabaseService,RDS)[4]、开放结构化数据服务(OpenTableService,OTS)[5]、开放数据处理服务(OpenDataProcessingService,ODPS)[6]、负载均衡(ServerLoadBalance,SLB)[7]、云盾[8]、云监控[9]等在内的一批云计算服务,本文将重点介绍ECS及与之相关的SLB 和云盾服务。 ECS以阿里云自主研发的飞天分布式计算系统为基础,基于先进的虚拟化、分布式存储等云计算技术,将计算和存储的基础资源整合在一起,并以Web方式为用户提供计算能力。ECS的体系结构如图1所示。

阿里云 安全与管理

安全与管理 云盾 云盾是阿里巴巴集团多年来安全技术研究积累的成果,结合阿里云计算平台强大的数据分析能力,为客户提供DDoS防护,主机入侵防护,以及漏洞检测、木马检测等一整套安全服务。 购买云服务器ECS时已自动开通云盾 我们的优势 免部署,免维护,即时开启 无需采购昂贵的设备,免部署 无需复杂配置、免维护 开通云服务器即开启云盾安全防护 多层防御体系 网络层提供流量清洗中心 主机层提供客户端防护功能 应用,数据层提供防火墙功能 海量数据分析 收集攻击行为数据 深入挖掘海量数据 分析判断安全趋势决定防护决策 产品功能 云盾帮您轻松应对各种攻击、安全漏洞问题,确保云服务稳定正常。 十年攻防,一朝成盾。 DDoS防护 提供四到七层的DDoS攻击防护,防护类型包括CC、SYN flood、UDP flood等所有DDoS 攻击方式。 主机入侵防护 提供包括密码暴力破解、网站后门检测和处理、异地登录在内的反入侵服务。 安全体检 提供Web漏洞检测、网页木马检测、端口安全检测等安全检测服务。 WEB防火墙 提供WEB攻击防护防火墙,能有效拦截SQL注入,XSS跨站等类型的WEB攻击。 案例 北京乐汇天下科技有限公司 北京乐汇天下科技有限公司,是一家专注于手机网游产品研发和运营的公司,拥有业内顶尖的游戏设计人才,拥有充满激情的研发团队,更拥有健康成熟的游戏理念。我们致力于通过数字娱乐方式提升人们的生活乐趣,为用户创造一流的娱乐产品和交流环境。 例如游戏作品 口袋海贼王

游戏类型:角色扮演 在线人数:100000人 使用产品:云服务器、负载均衡、内容分发网络、云盾、云监控 开发语言:Java、PHP 开发引擎:Cocos2d-x 如下不熟构架图: 架构解读 我们的web端更新是走cdn更新,应用服务器端的更新是批量脚本更新我们采用了多种数据库相结合的形式,既能保证数据的安全性和很高的可分析性,又保证了高效的运行效率,起初重要的玩家数据用了从库被动备份,随着玩家数据的变大,我们不得不取消从库备份,以节约不必要的内存成本,后来改成了每日备份到数据备份机器。游戏并采用了单服单库架构,以把以外损失和玩家损失降到最低。 客户反馈 我们的web端更新是走cdn更新,应用服务器端的更新是批量脚本更新,我们采用了多种数据库相结合的形式,阿里云既能保证数据的安全性,又保证了高效的运行效率。

阿里云计算介绍(2012-03-06)

阿里云 云计算业务介绍

阿里巴巴集团
1999年成立, 全球第一的网 上贸易市场和 商人社区。
2003年成立 亚洲第一的个 人交易网上平 台。
2004年成立 全球第一的独 立第三方支付 平台。
2005年全资 收购。中国领 先的互联网门 户资讯、邮箱、 搜索服务网站。
2009年成立 2009年成立 将打造全球最 先进的以数据 为中心的云计 算服务平台。
2011年从淘 宝分拆成立专 业B2C公司。
2011年从淘 宝分拆成立专 业电子商务垂 直搜索公司。
成立于2009年9月10日。 在杭州、北京和硅谷设有研发机构。 员工人数1200人,95%为技术研发人员。 境内累计申请技术专利85件。

阿里云阿里云-公司简介
愿景
? 成为以数据为中心的云计算服务公司 ? 打造互联网数据分享第一平台
? 打造云计算基础平台,提供低成本、高效率的云计算基础服务
价值
? 降低中小互联网企业创业门槛,帮助中小企业成长 ? 建设合作伙伴和中小企业共生共赢的云计算生态链
? 自主研发“云OS”云计算核心操作系统 ? 自主研发云计算基础产品服务和互联网基础产品服务
技术积累
? 自主研发大规模数据存储和处理平台,提供海量数据处理能力 ? 自主研发“云OS”手机操作系统,支撑移动终端云应用 ? 扶持合作伙伴和应用开发者开发丰富的云计算产品和应用

阿里云 – 云计算核心架构
地图、电邮、搜索、安全、渲染
PW 建站
其它云服务
第三方云应用
第三方本地应用
Cloud Engine
NodeJS PHP
开放结构 化数据处 理服务 关系型 数据库 服务 开放数 据处理 服务
云应用框架
App Engine HTML5 JavaScript
本地应用框架
弹性计 算服务
开放存储 服务
飞天大规模分布式计算系统
Webkit OpenGL SQLite
Aliyun Lib
Aliyun VM
Linux
数据中心
Linux Kernel
移动终端

阿里云-日志服务计费说明

日志服务计费说明

1.2.1.2.3.4. 计费说明 日志服务计费规则 日志服务对LogHub、LogSearch两个功能收费,LogShipper功能免费。 LogHub 计费项 注意: 读写流量根据传输大小计算(默认为压缩后大小),日志一般有5-10倍压缩率,原始日志为10GB/天,实际压缩大小为1.5GB,则以1.5GB计费。 Shard租用只统计当前读写Shard数量,例如目前有3个Shard:1个Shard状态为读写,另外2个Shard已经被合并为只读,则当前只收取1个Shard租赁费。因此已经被合并/分裂的Shard不收取租用费。 说明: 为什么Shard要收费? Shard是用户标准化读写单元,当用户创建Shard后,我们能并保证该部分服务能力。 流量超过Shard能力时怎么办? 尽可能服务,但在繁忙时会优先保证Shard预留部分服务。 Logtail写入流量如何收费? 与API方式相同,Logtail内部采用最优的传输策略并自带压缩,能够在保证延时情况下批量发送。 我们提供监控数据帮助用户判断具体流量大小。 计费例子 我的网站一天有1亿API请求,一个请求对应200字节日志,一天日志数量为20GB,高峰时流量为均值5倍,则峰值流量为1.16MB/S (<5MB/S)。这些日志每天被读取一遍做实时计算,并导入到OSS中进行备份。

--q q q --------需要预留一个Shard,0.04 元/天读写流量: 写入流量为20GB,假设压缩率为10, 实际流量为2GB,2 * 0.2 = 0.4 元实时计算读取流量和写入流量相同,0.4 元导入OSS部分免费 百万次请求:0.12 元 (使用Logtail自动做批量发送,产生100W次写) 一天费用为 0.04 + 0.4 * 2 + 0. 12 = 0.96 元 LogSearch(原SLS功能)计费项 LogSearch为附加功能,用户可以通过开启索引进行日志查询与分析,计费项为索引流量,对于每GB的数据,在写入时一次性收取存储费用(对不同周期索引流量费用如下) 换算成每GB每天的存储价格为 计费例子 我的网站一天有100W API访问,一个请求对应200字节日志,200MB,保存最近30天进行查询 索引全部字段:一天流量为200MB,一天费用为 1.5 * 0.2 = 0.3 元 索引部分字段:用户索引ErrorCode, URL两个字段,占总长度50%,一天费用为 0.3 * 0.5 = 0.15 元 成本、使用与扣费 价格优势 LogHub:以购买云主机+云磁盘搭建Kafka相比,对于98%场景下用户价格有优势。对小型网站而言,成本为kafka 30%以下 LogSearch:以够买云主机+自建ElasticSearch相比,成本为自建70%以下 有Restful API,可以直接针对移动设备提供数据收集功能,节省了日志收集网关服务器的费用免运维,随时随地弹性扩容使用

ACP-阿里云云计算-2

1. 阿里云的云服务器ECS产品的应用非常广泛,既可以单独的作为Web服务器,也可以与其他阿里云产品配合提供多媒体解决方案。在多媒体、大流量的APP或网站应用场景下,云服务器ECS实例与阿里云的()产品搭配,可大幅减少用户访问的等待时间并降低带宽费用。 (C) A. 对象存储OSS B. 负载均衡SLB C. 内容分发网络CDN D. 弹性伸缩Auto Scaling 2. 阿里云会为每个云服务器ECS实例分配一个私网IP。以下关于云服务器ECS实例的私网IP说法正确的是。(C) A. 私网IP不可以用于SLB的负载均衡 B. 同一地域内实例之间通过私网IP进行的通讯流量是收费的 C. 不要在操作系统内部自行变更私网IP,否则可能会导致私网通讯中断 D. 私网不允许同一帐号下的云服务器ECS实例之间或者云服务器ECS实例与其他云服务之间互访 3. 某用户是做香蕉销售生意的,所有的在线平台和数据都放在阿里云的云服务器ECS实例和云数据库RDS实例中,现在CEO想对香蕉销售额的变化趋势做一个监控,并在订单量发生较大变化时能收到预警信息,可以使用阿里云的()产品实现,并在管理控制台中展现结果。(D) A. 态势感知 B. 阿里绿网 C. 云服务器ECS D. 云监控 4. 阿里云的云服务器ECS实例的磁盘快照是某一个时间点上某一个磁盘的数据拷贝。以下针对云服务器ECS实例的磁盘快照的描述正确的是。(D) A. 自定义快照名称可以以auto开头 B. 快照被存放在用户自己的磁盘中 C. 只有系统盘支持自动快照 D. 快照存放在OSS上 5. 使用阿里云弹性伸缩(Auto Scaling)时,创建了伸缩组,指定了“伸缩最小实例数(台)”为5,“伸缩最大实例数(台)”为10,设定了正确的伸缩配置,并添加了伸缩规则为“增加3台ECS 实例”,创建了基于该伸缩规则的定时任务(运行时间设置为1小时后)。当前伸缩组中有效的ECS实例个数为3,马上启用该伸缩组,以下说法正确的是()(C) A. 会在定时任务触发时按照伸缩配置自动创建3个ECS实例,添加到伸缩组 B. 会在伸缩组启用时,按照伸缩配置自动创建7个ECS实例,添加到伸缩组 C. 会在伸缩组启用时,按照伸缩配置自动创建2个ECS实例,添加到伸缩组 D. 会在定时任务触发时按照伸缩配置自动创建2个ECS实例,添加到伸缩组 6. 您的操作系统为Windows的阿里云的云服务器ECS实例,通过远程登录发现黑屏,不可能是()原因造成的。(D) A. CPU资源耗尽

阿里云-大数据计算服务详细文档

大数据计算服务使用文档 1.新建项目 新建项目big_testdata1 2.添加成员 一个项目下可以添加多个成员,在这里我们添加一个成员是“悠闲地小蜗牛” 3.角色授权 新建一个项目后,会默认创建一个admin角色,该角色具有操作项目和表的所有权限,在这里我们新创建一个角色test1,给角色赋予项目的权限和表的权限,再把角色test1赋予给用户“悠闲地小蜗牛”

4.新建表 新建表tbl1 下面我们用成员“悠闲地小蜗牛”来操作项目和表 用成员“悠闲地小蜗牛”账号登录大数据计算服务,这时在项目列表下看不到刚才我创建的big_testdata1项目。 这时我们用客户端来登录,下载客户端,下载好后解压,解压后如下图所示: 在conf文件夹中有odps_config.ini文件。编辑此文件 odps_config.ini文件内容为:

修改好配置文件后运行bin目录下的odps(在Linux系统下是./bin/odpscmd,Windows下运行./bin/odpscmd.bat) 打开后界面如下: 用项目下的成员“悠闲地小蜗牛”来执行以下代码: create table tbl2(id bigint); insert overwrite table tbl1 select count(*) from tbl1; select'welcome to MaxCompute!'from tbl1;

提示没有这个CreateInstance权限,这时我们回到大数据计算服务给“悠闲地小蜗牛”添加 CreateInstance,CreateTable权限 责任人“悠闲地小蜗牛”创建表tbl2成功 我们给表tbl1添加权限,alert、select、update

ACP阿里云云计算4

一、单选题(共50题,每题1分,共50分) 1. 作为一个互联网初创企业的技术负责人,小A在早期选择了阿里云的云服务器ECS并将Java应用程序、数据库MySQL等部署在了一台云服务器ECS实例上。随着业务发展和用户量增加,发现部署在这台ECS实例上数据库性能出现瓶颈。为了最快速度解决该问题,您建议选择阿里云的(B)产品。 A. 对象存储OSS B. 云数据库RDS C. 负载均衡SLB D. 专有云VPC 2. 用户通过网络使用软件,无需购买软硬件、建设机房等,而改用向提供商租用基于Web的软件,来管理企业经营活动,且无需对软件进行维护,服务提供商会全权管理和维护软件。这种模式是云计算提供的(B)服务。 A. DaaS(数据即服务) B. SaaS(软件即服务) C. IaaS(基础设施即服务) D. PaaS(平台即服务) 3. 云计算以多种形式对外提供服务,比如提供给消费者的服务是运行在云计算基础设施上的应用程序,消费者可以在各种设备上通过瘦客户端界面访问,如浏览器(例如基于Web的邮件),不需要管理或控制任何云计算基础设施,包括网络、服务器、操作系统、存储,甚至独立的应用能力等等,仅需要对应用进行有限的、特殊的配置。这种服务形式被称作(C)。 A. DaaS(数据存储即服务) B. IaaS(基础设施即服务) C. SaaS(软件即服务) D. PaaS(平台即服务) 4. 阿里云对象存储OSS的一个突出特点就是提供了极高的数据可靠性,谈到可靠性自然离不开备份的技术和策略,以下关于OSS备份的说法,正确的是?(A) A. OSS提供三重备份(每份数据保留三个副本),出现故障时自动恢复 B. 用户需要自己考虑数据的安全性,OSS提供了丰富的备份接口,方便用户将数据进行异地备份 C. OSS提供三重备份(每份数据保留三个副本),出现故障时在人工参与下可快速恢复 D. OSS服务的备份是采用的物理机磁盘的RAID0+1技术方案,两块硬盘同时出现故障也不影响服务 5. 防DDoS攻击是阿里云的云盾最主要的功能之一,很多网站都曾经受到过不同类型的DDoS攻击,准确理解DDoS对网站做好安全防护至关重要。以下有关DDoS攻击的描述最准确的是?(D) A. DDoS攻击通过大量的尝试破解的服务器的登录密码 B. DDoS攻击的目的是窃取机密信息 C. DDoS攻击的主要目标是数据库 D. DDoS攻击的主要目的是让被攻击的目标服务器无法提供正常的服务,是目前最强大、最

阿里云产品容灾-高可用介绍及架构方案

袋鼠云出品——阿里云高可用-容灾解决方案 这两天,一篇名为《IT之家因无法忍受阿里云而迁移至XX云》的文章引起了整个云计算行业的热议。(袋鼠云CTO江枫还专门写了一篇热评) 从目前得到的信息看,其应该是在青岛区域购买了一台云服务器ECS,基于.net和自建SQL Server,并且应用和数据库跑在同一台云服务器上。 IT之家,所有应用都部署在单台ECS上,不具备高可用的特性。 即便阿里云产品本身就有容灾、高可用的特征,但是因为一些用户对阿里云产品的不了解和自身应用架构不够合理,也根本无法使其发挥该优势。 其实,IT之家的事情不是个例,有很多其他企业在这方面很头疼。 所以,袋鼠云技术专家结合以往实践经验,总结出了一套切实可行的《阿里云高可用-容灾解决方案》,希望能和各位阿里云上用户一起探讨。 一、阿里云产品容灾-高可用介绍 1、SLB 容灾-高可用介绍 阿里云SLB产品使用开源软件LVS+keeplived实现4层的负载均衡。 采用淘宝的Tengine实现7层的负载均衡。所有负载均衡均采用集群部署,集群之间实时会话同步,以消除服务器单点,提升冗余,保证服务稳定。在各个地域采用多物理机房部署,实现同城容灾。 SLB在整体设计上让其可用性高达99.99%。且能够根据应用负载进行弹性扩容,在任意一台SLB故障或流量波动等情况下都能做到不中断对外服务。

图一 2、ECS 容灾-高可用介绍 云服务器ECS实例是一个虚拟的计算环境,包含了CPU、内存、操作系统、磁盘、带宽等最基础的服务器组件,是ECS提供给每个用户的操作实体,就如同我们平时使用的虚机。 但需要确认的是,ECS自身是没有容灾和高可用方面的功能。 所以当我们在单台ECS服务器上部署各种应用时,特别是对于那些将应用服务,数据库服务等都打包安装在单台ECS服务器时就更要注意这点了。 那ECS自身没有容灾-高可用这样的功能,对于在单台ECS上部署各种服务,一旦ECS 故障就只能眼睁睁的看着它down机对外停止服务么? 此时,如果产品自身没有容灾和高可用功能,我们可以从架构上来弥补这个短板。 比如:在应用前端购买SLB产品,后端相同应用部署至少两台ECS服务器,或者是使用阿里云的弹性伸缩技术,根据自定义ECS自身资源的使用规则来进行弹性扩容。这样即便其中一台ECS服务器down机或者资源利用超负荷,也不会使我们的服务对外终止。 ECS具备的一些优势: 稳定性:服务可用性高达99.95%,数据可靠性高达99.9999999%。

相关主题