MapReduce 作业资源优化
1.YARN 的相关介绍 yarn 基础架构 ResourceManager(RM):RM 是一个全局的资源管理器,负责整个系统的资源管理和分配。它主要由两个组件构成:调度器(Scheduler)和应用程序管理器(Applications Manager,ASM)ApplicationMaster(AM):用户提交的每个应用程序均包含一个AM,主要…
StarRocks在360的应用实践——对于 StarRocks 的总结和展望
介绍了StarRocks 在360的落地,总结了 StarRocks 的一些优势。总体来说 StarRocks 是一个架构简单、方便使用的 OLAP 产品。查询性能方面表现比较优越,而且它已和多个平台进行了互联互通,我们可以很方便地和各个平台进行打通,同时它还支持一些比较流行的数据湖分析产品。总体来说 StarRocks 是一款很优秀的查询引擎。当…
周鸿祎乌镇宣布360上线SaaS商店 一站式服务中小微企业数字化转型
11月9日,2022世界互联网大会乌镇峰会开幕,360创始人周鸿祎以“构建SaaS生态,助力数字化共同富裕”为主题发表分论坛演讲,并宣布360集团正式上线SaaS商店,为中小微企业和实体产业提供一站式数字化转型服务,填补市场空白。周鸿祎表示,进入数字文明时代,数字化成为国家和各行各业未来发展的主旋律,中小微企业数字化需求迫切,却面临着“没钱、没人、…
再获Gartner认可!360持续领跑国内安全运营服务领域
日前,Gartner发布《Market Guide for Managed Detection and Response Services, China》报告(以下简称《报告》),对MDR中国市场现状及发展前景进行了剖析和预测。360数字安全集团凭借体系化、实战化的托管安全运营服务(MSS)及多场景的落地实践成果,入选该报告。这是继今年上半年入选《…
StarRocks在360的应用实践——对于 StarRocks所做的一些应用和探索
这部分将介绍除了落地的产品之外,我们针对 StarRocks 进行的探索。首先,随着大数据产品和处理需求的多样化。数据湖分析产品已经成为了各大企业都要进行的一个开发工作。云舟数仓是我厂内部的一个云原生的湖仓一体的 SaaS 化产品。它主要有三个特性,一是随时扩缩容,二是可以按需付费,三是它是一个全 SQL 化的产品,对于用户来说上手很简单。其架构主…
360人工智能平台赋能高校,构建教学场景实训平台
人工智能技术与微积分、线性代数、概率论与统计、计算机等多种学科相关,存在较高的理解门槛。但身处互联网大浪潮之中,除了专业算法工程师,其他的行业工作人员也希望对人工智能技术做些了解,以便更好地应用在业务之中,获得竞争力。 01 需求背景 当今数字化转型进程中,深度融合人工智能的基础理论和关键共性技术,对传统专业进行智能化升级改造,探索“X+人工智能技…
StarRocks在360的应用实践——StarRocks 在360主要的应用场景
目前我们使用 StarRocks 主要分为两部分,一部分是使用 StarRocks 本身的 OLAP 表,另一部分是使用 StarRocks 支持的外部表。对于 OLAP 表来说,StarRocks支持不同的导入方式。对于实时数据来说,我们可以通过 Flink 的 flink-connector- starrocks  转化为 …
Star Rocks在360的应用实践——为什么选择StarRocks
360为什么选择 StarRocks 作为 OLAP 分析引擎 第一部分 首先介绍一下 360 内部为什么选择StarRocks 以及 StarRocks 性能方面的测试和对比。 在 360 内部还没有使用 StarRocks 之前,使用的查询分析引擎主要包括 MySQL、Hive、Spark、Druid等。这些引擎都有自己擅长的方面,同时针对一些…
基于WVP的轻量化智能监控平台
当代智能监控平台不乏功能强大的产品,但由于涉及模块、组件多,产品容易臃肿,对私有化场景增加了一定的阻碍。于是,轻量化智能监控平台很有必要。下面为大家一一介绍~ 01. WVP是什么?WEB VIDEO PLATFORM是一个基于GB28181-2016标准实现的开箱即用的网络视频平台,负责实现核心信令与设备管理后台部分,支持NAT穿透,支持海康、大…
360入选北京市委网信办网络安全技术支撑单位
近日,在2022北京市国家网络安全宣传周活动中,北京市委网信办联合国家互联网应急中心北京分中心发布了网络安全技术支撑单位名单。360数字安全集团凭借过硬的技术实力和在国家级重要活动保障工作中的优异表现,成功入选网络安全威胁预警与监测处置领域技术支撑单位。 据了解,为充分发挥北京市网络安全技术资源优势,进一步提升网络安全综合服务保障水平,2022年8…