数据

简介： 企业大数据技术发展至今，历经了两次变质。第一次变质从最初的“小作坊”解决大数据问题，到后来企业用种种大数据技术搭建起属于自己的“大平台”，通过平台化的才智实现数据生产力的升级。 第二次变质让大数据从“大平台”向“迟钝制造”的开发范式演进。在2021阿里云峰会上，阿里巴巴集团副总裁、阿里云智能盘算平台事业部高级研究员贾扬清发布基于DataWorks的一站式大数据开发管理的平台，就是这个变质最…

作者：DataWorks产品经理 刘天鸢在当下的商业环境中，正确的数据管理策略对于数据增值是非常重要的。据统计，企业的数据一直都在以每年50%的速度增长，因此企业数据管理与整合的难度就不断加大了。DataWorks一直以来都致力于成为用户更方便、更快捷地从事数据开发与数据管理的好帮手。此次发布的数据建模，是对已有数据管理领域能力的补齐，为用户带来了在数据开发前，实施事前管理的能力。一、为什么要数据…

一、快手及时算计场景快手业务中的及时算计场景主要分为四块：公司级别的核心数据：包孕公司经营大盘，及时核心日报，以及移动版数据。相当于团队会有公司的大盘目标，以及各个业务线，比如视频相关、直播相关，都会有一个核心的及时看板；大型勾当及时目标：其中最核心的内容是及时大屏。例如快手的春晚勾当，我们会有一个总体的大屏去看总体勾当现状。一个大型的勾当会分为 N 个不同的模块，我们对每一个模块不同的玩法会有不…

只必要把公式图片用鼠标拖动到对象内，就能一键转成 LaTex 公式。

作者 | 阿里云估计平台研究员关涛、阿里巴巴项目管理专家王璀任何一种技巧都会经历从阳春白雪到下里巴人的过程，就像我们对估计机的理解从“戴着鞋套才能进的机房”变成了随处可见的智能手机。在前面20年中，大数据技巧也经历了这样的过程，从曾经高高在上的 “火箭科技（rocket science）”，成为了人人普惠的技巧。回首来看，大数据倒退初期涌现了非常多开源和自研体系，并在同一个规模展开了相当长的一段“…

数据仓库概念从1990年提出，经过了四个主要阶段。从最初的数据库演进到数据仓库，到MPP架构，到大数据时代的数据仓库，再到今天的云原生的数据仓库。在不断的演进过程中，数据仓库面对着不同的挑衅。

Hologres（中文名交互式分析）是阿里云自研的一站式及时数仓，这个云原生零碎融合了及时服务和分析大数据的场景，全面兼容PostgreSQL协议并与大数据生态无缝打通，能用同一套数据架构同时支持及时写入及时盘问以及及时离线联邦分析。它的出现简化了业务的架构，与此同时为业务提供及时决策的能力，让大数据发挥出更大的商业价值。Hologres作为HSAP服务分析一体化的落地最佳实践，其盘问引擎是一个完…

本文由 T3 出行大数据平台负责人杨华和资深大数据平台开发工程师王祥虎先容 Flink、Kylin 和 Hudi 湖仓一体的大数据生态体系以及在 T3 的相关应用场景，内容包括： 湖仓一体的架构 Flink/Hudi/Kylin 先容与交融 T3 出行结合湖仓一体的实践

编者按ClickHouse自从2016年开源以来便备受关注，主要应用于数据分析（OLAP）领域，各个大厂纷纷跟进大规模利用。百分点科技在某国家级项目建设中完成了多数据中心的ClickHouse集群建设，日增千亿数据量，在此基础上举行优化与本能调优，能够更好地解决部署规模扩大和数据量扩容等问题。本文结合项目的数据规模及营业场景，重点介绍了百分点大数据技术团队在ClickHouse国家级项目建设中的本…

Hologres（中文名交互式综合）是阿里云自研的一站式及时数仓，这个云原生系统融合了及时服务和综合大数据的场景，全面兼容PostgreSQL协议并与大数据生态无缝打通，能用同一套数据架构同时支援及时写入及时查问以及及时离线联邦综合。它的出现简化了业务的架构，与此同时为业务提供及时决策的能力，让大数据发挥出更大的商业价值。从阿里集团诞生到云上商业化，随着业务的发展和技术的演进，Hologres也在…

「数据是一切的起点，华夏又是数据大国，这使得数据运作在华夏变得非常重要。」在昨日举行的2021BAAI智源大会首日全体大会上，清华大学国家金融研究院院长朱民发表了题为《数据财产时代》的主题演讲，剖析了数据的经济学属性和财产特性，阐释了数据财产化的意义和必要性，解读了数据财产化转型将面临的挑战和应对策略。本文整理了朱民博士演讲的部分内容，并在文末附有相关演讲资料。整理报道 | 齐健数据在今天的社会中…

如果你看过那个一小时的演讲，而且觉得意犹未尽，这门课程可能适合你。

编者按：如今在科技领域，越来越多的女性从业者成为行业中坚力量，“她智慧”不同视⻆的思维方式，以及她们对事物的敏感度和包容性，使得这些女性领导者在企业料理过程中具有敏锐的洞察力、缜密的思辨力和透彻而深入的综合能力。2021年，数字商业期间联合中国网开展了2021年度专题策划：科技创新中的“她观点”，以女性的视角专业解读科技创新源动力，百分点科技首席数据迷信家杜晓梦受邀接受采访，以独特的视角解读了何为…

数字时代，隐衷和平安正成为一个关键问题。公司和组织每天都在收集大量的数据，然而数据隐衷破坏相关法律法规越来越严格，给大数据和人工智能带来了新的应战。例如欧盟的《通用数据破坏条例》（General data Protection Regulation，GDPR）就明确提出，禁止在没有明确用户受权的情况下，直接合并来自不同来源的用户数据进行AI建模。为了探索AI如何适应这种新的监管环境，微众银行、京东…

近日，上海市科学技能委员会发布了《关于2020年度上海市技能革新重心扶植立项的通知》，为贯彻落实《关于进一步深化科技体制机制改革 增强科技革新重心策源能力的意见》，推进重点财产范围技能革新，经专家评审论证，确定将“上海市特种数控装备技能革新重心”等18家技能革新重心列入2020年度上海市技能革新重心扶植立项计划。矩阵元全资子公司上海阵方科技有限公司将承担“上海市分布式隐衷人工智能技能革新重心”的扶…

编者按信息抽取是从文本数据中抽取一定信息的一种手艺，命名实体识别（Named Entity Recognition, NER）是信息抽取的基础任务之一，其目标是抽取文本中具有基本语义的实体单元，在知识图谱构建、信息抽取、信息检索、机器翻译、智能问答等体系中都有广泛应用。基于监督学习的NER体系通常需要大规模的细粒度、高精度标注数据集，一旦数据标注质量下降，模型的表现也会急剧下降。利用不完全标注的数…

编者按媒介融合下半场的重心将向智能化趋势发展。如何打造实用有效的媒介数据产品和办事，继而完成数智化转型，已成为媒介行业当前最为关注的问题。本文围绕当前媒介机构的转型需求，百分点科技大数据技术团队体系地介绍了百分点科技媒介数据中台建造方法论及实践成果。一、媒介数据中台建造背景以报纸、出版、广播电视等为代表的传统媒介，和以网站、新闻客户端、微博、微信公众号、IPTV、OTT等为代表的新媒介产品，无论是…

编者按数据作为第五大生产要素，已逐渐成为政府和企业决策的重要手段与依据。面对数据多样化、数据需要个性化、数据应用智能化的需要，以及在2B和2G行业中数据品质参差不齐、数据应用难以发挥价值、数据资产难以积淀等问题，如何做好数据处置职业、晋升数据处置本领成为了政府和企业数字化转型的重中之重。百分点大数据技术团队基于多年的数据处置项目经验，总结了一套做好数据处置职业及晋升数据处置本领的实施方法论。近年来…

「作为数据迷信家，我还有机会吗？」不，你更应该成为数据工程师。