|
存储 NoSQL 物联网
|

现代IM系统中消息推送和存储架构的实现

前言 IM全称是『Instant Messaging』,中文名是即时通讯。在这个高度信息化的移动互联网时代,生活中IM类产品已经成为必备品,比较有名的如钉钉、微信、QQ等以IM为核心功能的产品。当然目前微信已经成长为一个生态型产品,但其核心功能还是IM。

39185 1
|
数据采集 监控 Go
|

Logtail技术分享(二) : 多租户隔离技术+双十一实战效果

目前logtail已承载阿里云全站、所有云产品服务、全球各Region部署、阿里巴巴集团(淘宝、天猫、菜鸟等)上重要服务的数据采集。在集团内部一台服务存在数百个采集配置属于常态,每个配置的优先级、日志产生速度、处理方式、上传目的地址等都有可能不同,如何有效隔离各种自定义配置,保证采集配置QoS不因部.

14602 0
|
存储 运维 NoSQL
|

表格存储如何实现高可靠和高可用

本文会介绍表格存储(阿里自研的一款分布式NoSQL数据库)如何实现数据高可靠和服务高可用,读者可以通过本文了解高可靠和高可用的一些概念和技术,以及分布式系统是如何进行高可靠和高可用设计的,此外,我们还会有一篇专门的文章介绍容灾相关的话题。

8219 0
|
存储 容灾 NoSQL
|

表格存储如何实现跨区域的容灾

本文首先会介绍容灾的一些背景和相关场景,以及实现数据库容灾的两个重要能力,即数据同步和切换。然后介绍表格存储如何实现相应的功能,以及我们如何把相应的功能服务化,让用户能够方便而灵活的搭建容灾场景,给业务提供更高级别的可用性保障,或者是通过异地多活优化不同地域的终端用户的延迟。

6713 0
|
监控 数据可视化 API
|

从日志到双十一大屏只要一步:LOG/SLS+DataV 打通

简介 日志服务从5月份开始提供了SQL查询功能,可以在1秒内快速分析1亿条日志。强大的统计分析能力,加上一些可视化手段,可以帮助开发者快速分析自己的日志。 在双十一这一个关键的节点,我们需要实时的关注自己的业务量,这时候配置一个可视化大屏就很关键,在一个大屏里展示所有的指标。

10674 0
|
存储 数据可视化 NoSQL
|

以物流案例看基于表格存储实时数据流的serverless计算

许多业务有实时数据处理的需求。相较于传统的数据库+流计算+应用服务器方案,使用基于表格存储实时数据流的Serverless计算方案有自动弹性伸缩及开发简单、部署简单等优点。本文通过一个想象的物流案例来说明如何实施“基于表格存储实时数据流的Serverless计算方案”。

7206 0
|
算法 应用服务中间件 对象存储
|

OSS上传回调支持自定义header以及v2版本签名

上传回调(callback)是OSS的一个重要功能,可以应用在客户端与服务器端数据同步等一些场景。上传回调功能支持在回调的body中传入信息,但是在一些场景下,用户希望能够在回调给应用服务器的请求header中传入自定义的header,用于满足服务器端的一些特殊需求。

4225 0
|
Web App开发 弹性计算 监控
|

云栖大会在线用户行为分析场分享:海量流式视频日志收集

本文介绍了不同平台、不同格式的日志采集、处理面临的挑战,详细介绍了阿里云日志服务的Loghub功能以及其丰富的上下游生态。

3214 0
|
SQL 监控 Serverless
|

云栖大会Serverless场分享:日志处理挑战与展望

Serverless由于本身的优势,其使用越来越广,在Serverless场景下的日志分析和处理也有其自身的特点。本文通过介绍Serverless场景下日志处理的挑战,结合阿里云日志服务,举例说明日志在Devops、运营等多个场景下的使用,来展示如何从容应对Serverless下日志处理的挑战。

3793 0
|
监控 数据可视化 应用服务中间件
|

5分钟搭建网站实时分析:Grafana+日志服务实战

阿里云日志服务是针对日志类数据一站式服务,用户只需要将精力集中在分析上,过程中数据采集、对接各种存储计算、数据索引和查询等琐碎工作等都可以交给服务。2017年9月日志服务加强日志实时分析功能(LogSearch/Analytics),可以使用查询+SQL92语法对日志进行实时分析。

79199 0
|
测试技术 Android开发
|

Android Unit Tests

本文主要通过样例来简要介绍Android单元测试基于AndroidTestCase类,主要针对sdk这种不涉及ui的但是需要依赖AndroidSDK的场景,并可以生成代码的覆盖率报告,这也是我们oss-android-sdk中的一个应用,通过这种测试可以保证sdk的稳定运行和性能上的保证,可以增强测试的粒度,目前我们oss-android-sdk覆盖率已达95%。

1700 0
|
存储 监控 应用服务中间件
|

日志服务+函数服务实战: 访问日志地域、运营商实时分析

日志服务的LogHub是流式的数据中心,日志写入后可实时消费。日志服务ETL面向的正是这些流式写入的数据,提供准实时(1分钟级别)的ETL作业。

5847 0
|
SQL 监控 Java
|

使用jdbc统计和可视化日志

简介 mysql作为非常流行的关系型数据库,很多软件支持通过mysql传输协议和sql语法获取mysql数据。用户只需要对sql语法熟悉,即可完成对接。日志服务提供了mysql协议查询和分析日志数据。

4906 0
|
存储 NoSQL 搜索推荐
|

如何打造千万级Feed流系统

Feed流是一个目前非常常见的功能,在众多产品中都有展现,比如微博,朋友圈,消息广场,通知,IM等。通过Feed流可以把动态实时的传播给订阅者,是用户获取信息流的一种有效方式。在大数据时代,如何打造一个千万级规模的Feed流系统仍然是一个挑战。本文中会介绍如何设计一个千万量级的Feed流系统的架构。

72724 4
|
SQL 监控 Java
|

使用jdbc访问日志服务分析和可视化日志

简介 一直以来,日志服务提供了 以restfull API方式写入、查询日志数据,管理自己的项目及日志库。现在日志服务新增提供了mysql 接口,用户可以使用jdbc连接到日志服务,通过标准的sql语法进行查询和计算。

12680 0
|
存储 监控 Serverless
|

10.11杭州Clouder lab 十分钟搭建共享应用1:函数计算及表格存储操作说明

10.11杭州Clouder lab 十分钟搭建共享应用操作说明

5947 0
|
监控
|

10.11杭州Clouder lab 十分钟搭建共享应用 2:如何通过日志服务实现用户的日志收集与分析

场景描述 共享电动车企业使用函数服务搭建服务端。在函数服务中开启日志,把程序日志写到日志服务,同时在函数代码中使用SDK把运营日志写入到日志服务,使用日志服务进行日志分析。 在日志服务中,用户可以: 开发查看日志调试程序,确保程序的逻辑符合逻辑。

4363 0
|
存储 API Windows
|

Azure Log Analytics产品API文档读后感

AUZRE LOG ANALYTICS 文档读后感

2804 0
|
存储 弹性计算 监控
|

NAS数据迁移初探

阿里云文件存储(Network Attached Storage,简称NAS)是面向阿里云ECS实例、HPC和Docker的文件存储服务,提供标准的文件访问协议,用户无需对现有应用做任何修改,即可使用具备无限容量及性能扩展、单一命名空间、多共享、高可靠和高可用等特性的分布式文件系统。

5076 0
|
监控 大数据 Serverless
|

#云栖大会门票限时赠送# 10.11云栖大会Clouder Lab “十分钟搭建共享应用”,手把手教你Serverless架构下的应用实现

10.11日下午杭州云栖大会 阿里云大学Clouder Lab专场,通过现场动手实验课的形式,教您如何利用阿里云函数计算、表格存储以及日志服务来搭建无服务器框架,实现“共享电单车”的主要应用场景。

2499 0
|
存储 缓存 Android开发
|

Android 在线视频播放总结

协议选择 当前流媒体播放中常用到的协议有rtmp,rtsp和http等。各个协议适用于不同的场景。各有优点。具体的区别可参见: http://blog.csdn.net/aflyeaglenku/article/details/53929028 http://www.jianshu.com/p/5b0fa403b3ce rtsp和rtmp协议需要搭建专门的流媒体服务器。

7691 0
|
存储 监控 固态存储
|

自建ELK vs 日志服务(SLS)全方位对比

提到日志实时分析,很多人都会想到很火的ELK Stack(Elastic/Logstash/Kibana)来搭建。ELK方案开源,在社区中有大量的内容和使用案例。阿里云日志服务产品在新版中增强查询分析功能(LogSearch/Analytics),支持对日志数据实时索引与查询分析,并且对查询性能和计算数据量做了大量优化。

19861 0
|
分布式计算 Hadoop PHP
|

OSS社区工具与插件全新升级

为了方便用户更高效的使用OSS,我们推出了第一批社区插件与工具。该批插件是开源社区广泛应用的平台、框架或工具。如果您有新的需求请在评论中回复,OSS会根据您的需求持续支持更多插件和工具。

4960 0
|
存储 数据采集 监控
|

Logtail技术分享(一) : Polling + Inotify 组合下的日志保序采集方案

logtail是阿里云一款进行日志实时采集的Agent,当前几十万台部署logtail的设备运行在各种不同环境上(集团、蚂蚁、阿里云,还有用户部署在公网、IOT设备),每天采集数PB的数据,支撑上千种应用的日志采集。

17017 1
|
SQL Web App开发 监控
|

日志服务(原SLS)性能优化:一个SQL一秒分析一亿日志

日志服务(原SLS)提供LogSearch/Analytics在一秒内能:实时检索到该日志,并且提供5个组合条件查询10亿级数据,5个维度聚合SQL分析1亿条数据能力

3749 0
|
Web App开发 监控
|

日志服务(原SLS)发布:仪表盘(Dashboard)功能

日志服务在9月推出仪表盘(Dashboard)功能,支持将查询分析语句进行可视化展示。

6621 0
|
存储 Shell Linux
|

AliCloud Duplicity

alicloud-duplicity是基于duplicity的开源数据备份工具,支持增量备份、数据加密,完全兼容duplicity。本文介绍了alicloud-duplicity的使用场景、安装方法、常用命令等。

3478 0
|
对象存储
|

OSS WordPress插件(Aliyun OSS For WordPress)

WordPress是一个注重美学、易用性和网络标准的个人信息发布平台,广泛应用于网络信息发布平台的搭建,特别是个性化的博客。本文介绍了OSS的WordPress插件Aliyun OSS For WordPress。

15022 1
|
弹性计算 开发工具 数据中心
|

OSS访问域名使用规则

OSS域名构成规则 针对OSS的网络请求,除了GetService这个API以外,其他所有请求的域名都是带有指定Bucket信息的三级域名组成的。 访问域名规则:BucketName.Endpoint。

10583 1
|
运维 监控 Java
|

【最佳实践】如何使用云监控+日志服务快速完成故障发现和故障定位

今天分享一篇开发小哥哥如何使用云监控和日志服务快速发现故障定位问题的经历。

3339 1
来自: 日志服务SLS  版块
|
存储 大数据 文件存储
|

深度解析阿里云存储

分析师认为,阿里云目前的存储产品系列展示了阿里云的潜力。随着时间的推移,已经成为全球超大规模云服务提供商的有力竞争者和替代者。阿里云云存储不仅拥有一系列不同的产品和功能,而且现在已经具备了相当的能力,在全球范围内提供广泛的服务。

8693 0
|
存储 数据中心 云计算
|

靠ta取胜?阿里云强势崛起冲击世界前三!

阿里云云存储在中国的数字商业领域已经发挥了重要作用。此外,已经在欧洲、美洲、大洋洲及亚洲9个国家和区域拥有云存储服务能力的阿里云仍未止步,志在将眼光投向更广泛的海外市场,扩大阿里云在全球范围内的影响力。

2457 0
|
存储 大数据 对象存储
|

Gartner存储魔力象限前四,阿里云如何成为“领头羊”?

阿里云目前的存储产品系列展示了阿里云的潜力,并且已经成为全球超大规模云服务提供商的有力竞争者。相信在未来,作为云计算行业翘楚的阿里云在全球范围内能提供更为广泛的服务,它将用更为精湛的技术令全世界为之叹服!

2804 0
|
新零售 监控
|

日志系列--账单日志的统计分析

简介 成交账单是电商公司的核心数据,是一系列营销和推广活动最终的转化成果。这些数据包含了很多有价值的信息:从这些数据出发,可以描绘出用户画像,为下一步的营销提供方向。账单数据还能提供货物的受欢迎程度,为下一步备货提供准备。

2805 0
|
SQL 监控 前端开发
|

日志系列--前端访问日志的统计分析

简介 很多个人站长在搭建网站时使用nginx作为服务器,为了了解网站的访问情况,一般有两种手段: 使用CNZZ之类的方式,在前端页面插入js,用户访问的时候触发js,记录访问请求。 分析nginx的access log,从日志中挖掘有用信息。

4738 0
|
监控
|

日志系列--行车轨迹日志的统计分析

简介 出租车公司记录了每一次载客交易发生的信息细节,包括上下客时间、经纬度、路程距离、支付方式、支付金额、缴税额等信息。详细的数据,为出租车公司的运营提供了极大的帮助,例如,了解哪些时间段比较热门,对应增加运行车次;哪些地区需求比较广泛,调度更多车辆前往。

2577 0
|
存储 对象存储
|

正确使用OSS Lifecycle机制节约数据存储费用

??OSS提供标准、低频访问、归档三种存储类型,全面覆盖从热到冷的各种数据存储场景。用户可以对一个Bucket中有需要的Object设置Lifecycle规则,实现一个Object从Standard -> 低频 -> 归档 -> 过期删除的生命周期管理。

4565 0
|
存储 负载均衡 NoSQL
|

表格存储(TableStore)新功能Stream应用场景介绍

上面一篇我们介绍了表格存储新功能Stream, 下面我们展开说一些场景,看看有了Stream后,哪些我们常见的应用场景可以更高效的设计和实现。 直播用户行为分析和存储 场景描述 现在视频直播非常火热,假如我们使用TableStore记录用户的每一次进入房间和离开房间,房间内的操作记录等,并希望根据用户的最近的观看记录,更新直播推荐列表。

6246 0
|
存储 负载均衡 NoSQL
|

表格存储(TableStore)新功能Stream初探

阿里云自研PB级nosql数据库TableStore近期发布了新功能Stream,也就是增量通道,可以让用户实时的获取数据库中的增删改操作。很多使用TableStore的用户会定期把数据导入各类计算平台做数据的离线分析,以前的做法是使用DATAX或者使用TableStore的SDK定期拉取数据。

6565 0
|
测试技术 PHP 开发工具
|

Laravel/Lumen搭建服务器性能测试

分析laravel搭建的服务器的吞吐量、cpu使用率、内存消耗,最后在这个服务器环境上测试php sdk的性能。

6770 0
|
Web App开发 应用服务中间件 PHP
|

oss php sdk+laravel搭建一个简单网站

用php laravel搭建一个简单的web服务器,静态资源托管到oss

6340 0
|
弹性计算 文件存储 Windows
|

Windows ECS上如何以正确的姿势配置FTP Server使用NAS

如何在Windows ECS上正确配置FTP,使FTP用户可以访问ECS上挂载的NAS文件系统。

5701 0
|
存储 物联网 数据库
|

时间序列数据的存储和计算 - 开源时序数据库解析(三)

InfluxDB在DB-Engines的时序数据库类别里排名第一,实至名归,从它的功能丰富性、易用性以及底层实现来看,都有很多的亮点,值得大篇幅来分析。

12525 0
|
数据中心 数据安全/隐私保护 云计算
|

混合云备份如何助你保护数据并节省成本

1611 0
|
存储 API 对象存储
|

阿里云OSS归档存储类型单价下调 45%

7月21日起,阿里云对象存储OSS归档存储类型存储单价下调45%,归档解冻(Restore)时间优化到1分钟内

5468 0
|
Java 对象存储
|

OssImport系列之五——常见问题及排除

数据迁移工具OssImport的常见问题及排除。

10954 0
|
存储 弹性计算 对象存储
|

OssImport系列之四——最佳实践

介绍数据迁移工具OssImport在典型场景下的应用、典型需求的实现方法。

4171 0
|
Java Linux Shell
|

OssImport系列之三——分布式部署

介绍了OssImport分布式模式的部署、运行、常见问题排除等。

3717 0

云存储

阿里云存储基于飞天盘古2.0分布式存储系统,产品多种多样,充分满足用户数据存储和迁移上云需求。

0
今日
7218
内容
43
活动
195188
关注
你好!
登录掌握更多精彩内容

相关产品

http://www.vxiaotou.com