一文搞懂Kafka中的listeners配置策略
1. listeners中的plaintext controller external是什么意思？ 2. Kraft模式下controller和broker有何区别？ 3. 集群节点之间同步什么数据，通过哪个端口，是否可以自定义端口？ 4. 客户端通过哪个端口连接到kafka，通过9092连接的是什么，broker还是controller？ 5. 为controller配置了单独的端口有什么用？ 6. control.plane.listener.name与controller.listener.names有何区别？
机器学习PAI常见问题之跑predict时报错如何解决
PAI（平台为智能，Platform for Artificial Intelligence）是阿里云提供的一个全面的人工智能开发平台，旨在为开发者提供机器学习、深度学习等人工智能技术的模型训练、优化和部署服务。以下是PAI平台使用中的一些常见问题及其答案汇总，帮助用户解决在使用过程中遇到的问题。
机器学习PAI常见问题之self-attention再target-attention如何解决
PAI（平台为智能，Platform for Artificial Intelligence）是阿里云提供的一个全面的人工智能开发平台，旨在为开发者提供机器学习、深度学习等人工智能技术的模型训练、优化和部署服务。以下是PAI平台使用中的一些常见问题及其答案汇总，帮助用户解决在使用过程中遇到的问题。
Chronos: 将时间序列作为一种语言进行学习
Chronos框架预训练时间序列模型，将序列值转为Transformer模型的tokens。通过缩放、量化处理，模型在合成及公共数据集上训练，参数量20M至710M不等。优于传统和深度学习模型，展示出色零样本预测性能。使用分类交叉熵损失，支持多模态输出分布学习。数据增强策略包括TSMix和KernelSynth。实验显示大型Chronos模型在概率和点预测上超越多种基线，且微调小型模型表现优异。虽然推理速度较慢，但其通用性简化了预测流程。论文探讨了优化潜力和未来研究方向。
机器学习PAI常见问题之资源不足如何解决
PAI（平台为智能，Platform for Artificial Intelligence）是阿里云提供的一个全面的人工智能开发平台，旨在为开发者提供机器学习、深度学习等人工智能技术的模型训练、优化和部署服务。以下是PAI平台使用中的一些常见问题及其答案汇总，帮助用户解决在使用过程中遇到的问题。
案例研究：如何通过淘宝天猫商品销量数据分析竞争对手
淘宝天猫的商品销量数据接口主要用于商品数据分析和监控业务，通过这些接口可以获取商品的实时销量、30天销量以及总销量等详细信息。以下是关于这一数据接口的详细介绍：
【新手教程】0基础1分钟搞定幻兽帕鲁游戏联机服务器搭建
幻兽帕鲁（Palworld）是一款备受欢迎的多人在线角色扮演游戏，让玩家可以与其他玩家一起探索、组队和战斗。为了能顺畅地体验游戏，搭建一个高效、稳定的游戏服务器至关重要。阿里云提供快速、简化的服务器搭建方案，新手小白0基础1分钟搞定幻兽帕鲁游戏联机服务器搭建！
TuGraph Analytics图数据集成：表到图的最后一公里
小伙伴们想玩一玩图计算，数据的导入工作总是绕不开的一个环节。为了降低大家数据导入操作的成本，提升图计算的整体使用体验，TuGraph Analytics推出了“图数据集成”能力，帮助大家通过简单配置完成数据导入工作。
阿里云实时计算Flink的产品化思考与实践【上】
本文整理自阿里云高级产品专家黄鹏程和阿里云技术专家陈婧敏在 FFA 2023 平台建设专场中的分享。
网页解析高手：C#和HtmlAgilityPack教你下载视频
使用C#和HtmlAgilityPack解析小红书网页，下载其视频内容。文章涵盖了解析网页、获取视频链接、C#实现、HtmlAgilityPack简化解析、代理IP确保下载稳定及多线程提高下载效率。提供的代码示例展示了如何设置代理和多线程下载视频。实验结果显示，该方法能有效、高效地下载小红书视频。
Langchain中改进RAG能力的3种常用的扩展查询方法
有多种方法可以提高检索增强生成(RAG)的能力，其中一种方法称为查询扩展。我们这里主要介绍在Langchain中常用的3种方法
使用HtmlUnit库的Java下载器：下载TikTok视频
使用Java和HtmlUnit构建TikTok视频下载器，模拟浏览器行为，绕过访问限制。通过爬虫代理配置代理服务器，隐藏真实IP，多线程技术提升下载效率。示例代码展示如何设置HtmlUnit，创建代理，启用JavaScript，下载并处理视频链接。学习了页面模拟、JavaScript交互、代理使用及多线程技术，为实际爬虫项目提供参考。
知识图谱与大模型双向驱动的关键问题和应用探索
图谱技术积极拥抱新一代AI技术体系，如大模型(Large Language Model, LLM)，实现二者的双驱动增强，定义融合互通的技术范式和关键问题，借助LLM强大的语言理解能力，为基于非/半结构化数据的图谱构建提效，同时在用户问答中，语言要素和语义结构的理解也会更加精准。
【玩转幻兽帕鲁部署】阿里云幻兽帕鲁服务器搭建1分钟搞定：从入门到精通
【玩转幻兽帕鲁部署】阿里云幻兽帕鲁服务器搭建1分钟搞定：从入门到精通。
[YOLOv8/YOLOv7/YOLOv5系列算法改进NO.5]改进特征融合网络PANET为BIFPN（更新添加小目标检测层yaml）
本文介绍了改进YOLOv5以解决处理复杂背景时可能出现的错漏检问题。
使用 Paimon + StarRocks 极速批流一体湖仓分析
本文整理自阿里云智能高级开发工程师王日宇，在 Flink Forward Asia 2023 流式湖仓（二）专场的分享。
构建 Streaming?Lakehouse：使用 Paimon 和 Hudi 的性能对比
Apache?Paimon 和 Apache?Hudi 作为数据湖存储格式，有着高吞吐的写入和低延迟的查询性能，是构建数据湖的常用组件。本文将在阿里云EMR 上，针对数据实时入湖场景，对 Paimon 和 Hudi 的性能进行比对，然后分别以 Paimon 和 Hudi 作为统一存储搭建准实时数仓。
AI大模型运维开发探索第三篇：深入浅出运维智能体
大模型出现伊始，我们就在SREWorks开源社区征集相关的实验案例。玦离同学提供了面向大数据HDFS集群的智能体案例，非常好地完成了运维诊断的目标。于是基于这一系列的实验和探索。本文详细介绍智能体在运维诊断中的应用探索。
微软开抢年收入上亿美元的 Redis 饭碗？开源性能遥遥领先的 Garnet：无需修改，Redis 客户端可直接接入
微软开源了高性能缓存系统Garnet，旨在挑战 Redis 和 Dragonfly。Garnet 基于 .NET8，提供高吞吐量、低延迟和跨平台支持。它支持 RESP 协议，允许大部分 Redis 客户端无缝迁移。Garnet 的特性包括多连接批量处理以提升扩展性和吞吐量，以及更好的延迟稳定性。适合于需要高性能缓存层来降低成本和提高应用性能的场景。Garnet 的集群模式允许动态键迁移和分片管理，且支持 TLS 和自定义扩展。其网络层设计减少了线程切换开销，存储层则具备丰富的 API 和事务支持。在基准测试中，Garnet 在吞吐量和延迟上优于 Redis 和 KeyDB，展现出优秀的扩展性。
Linux权限管理
Linux权限管理是一种控制用户和程序对文件和文件夹的访问的方法。它使用三个主要的概念：所有者（owner）、群组（group）和其他（others）。 每个文件和文件夹都有一个所有者，这是创建该文件或文件夹的用户。所有者拥有最高的权限，可以对文件和文件夹进行更改、读取和删除。群组是一组用户，他们可以共享文件和文件夹的权限。其他用户是除所有者和群组以外的其他用户。 Linux使用三个主要的权限：读、写和执行。读权限允许用户查看文件或文件夹的内容，写权限允许用户更改文件或文件夹的内容，执行权限允许用户运行文件或文件夹中的程序。是一种控制用户和程序对文件和文件夹的访问的方法。它使用三个主要的概念：
ChatGPT-5 最快将于 6 月发布
OpenAI计划推出ChatGPT-5，预计6月发布，企业客户已提前体验其增强的性能与定制化功能。模型将经过密集训练和严格安全测试，提升语言理解和交互的自然度。GPT-5将影响多个行业，带来商业机遇，同时引发关于伦理和安全的讨论。其在教育和医疗领域的应用前景广阔，但用户仍需注意信息验证。
充分发挥 SQL 能力
MaxCompute（ODPS）SQL 发展到今天已经颇为成熟，作为一种 SQL 方言，可以高效地应用在各种数据处理场景。本文尝试独辟蹊径，强调通过灵活的、发散性的数据处理思维，就可以用最基础的语法，解决复杂的数据场景。
基于Megatron-Core的稀疏大模型训练工具：阿里云MoE大模型最佳实践
随着大模型技术的不断发展，模型结构和参数量级快速演化。大模型技术的应用层出不穷。大模型展现惊人效果，但训练和推理成本高，一直是巨大挑战。模型稀疏化能降低计算和存储消耗。近期以Mixtral为代表的MoE（多专家混合）大模型证明了稀疏MoE技术能大幅降低计算量、提升推理速度，模型效果甚至超过同规模稠密模型。阿里云PAI和NVIDIA团队深入合作，基于Megatron-Core MoE框架，解决了MoE大模型训练落地时会遇到的可拓展性、易用性、功能性以及收敛精度等核心问题，在下游任务上取得了很好的模型效果。
阿里云 EMR Serverless Spark 版免费邀测中
阿里云 EMR Serverless Spark 版，以 Spark Native Engine 为基础，旨在提供一个全托管、一站式的数据开发平台。诚邀您参与 EMR Serverless Spark 版免费测试，体验 100% 兼容 Spark 的 Serverless 服务：https://survey.aliyun.com/apps/zhiliao/iscizrF54
大模型+知识图谱双驱架构：新一代《知识语义框架SPG》白皮书
白皮书展望了SPG与LLM双向驱动的技术架构。通过基于SPG构建统一的图谱技术框架，可以屏蔽复杂的技术细节以支持新业务的快速部署，真正实现知识图谱技术的框架化、平民化、普惠化。
大数据与机器学习
大数据领域前沿技术分享与交流，这里不止有技术干货、学习心得、企业实践、社区活动，还有未来。
