-
半个月每天到处搜集数据，结果Python爬虫轻轻松松做到了
所属栏目：[大数据] 日期：2022-10-14 热度：7989
Python是一门非常简单易学好用,同时功能强大的编程语言,具有丰富和强大的库,开发效率特别高。
Python爬虫能做什么
世界上80%的爬虫是基于Python开发的，学好爬虫技能，可为后续的大数据分析、挖[详细] -
数据挖掘经典架构（1）——大数据架构
所属栏目：[大数据] 日期：2022-10-13 热度：3350
大数据技术发展的目前阶段，通用的大数据架构分为6个处理层次：
第一层，数据源（Sources），这个层次关注源数据来自哪个系统，以及源数据如何从源系统进入大数据系统。
第二层大数据架构，EL（[详细] -
终于有人把大数据架构讲明白了
所属栏目：[大数据] 日期：2022-10-13 热度：3325
大数据技术其实是分布式技术在数据处理领域的创新性应用，其本质和此前讲到的分布式技术思路一脉相承，即用更多的计算机组成一个集群，提供更多的计算资源，从而满足更大的计算压力要求。
大数据技术讨论[详细] -
阿里云TSDB在大数据集群监控中的方案与实战
所属栏目：[大数据] 日期：2022-10-13 热度：8925
目前大部分的互联网企业基本上都有搭建自己的大数据集群，为了能更好让我们的大数据集群更加高效安全的工作，一个优秀的监控方案是必不可少的；所以今天给大家带来的这篇文章就是讲阿里云TSDB在上海某大型互联网[详细]
-
大数据架构和业务处理流程
所属栏目：[大数据] 日期：2022-10-13 热度：1113
从这张大数据的整体架构图上看来，大数据的核心层应该是：数据采集层、数据存储与分析层、数据共享层、数据应用层，可能叫法有所不同，本质上的角色都大同小异。
所以我下面就按这张架构图上的线索，慢慢[详细] -
浅谈新零售数字化与数据运用的难点与机会！
所属栏目：[大数据] 日期：2022-10-13 热度：4091
我们处于一个好的时代，我们还会处于一个更好的时代。我想把这句话送给所有零售业同行们。
新零售，万物互联，大数据……几乎所有的新事物、新理念、新概念都会或多或少的与零售业发生关系。[详细] -
从大数据看“专精特新”企业韧性与活力
所属栏目：[大数据] 日期：2022-10-12 热度：4892
今年7月，专精特新创新指数达130.3，同比、环比分别增长36.9%和16.9%；2021年专精特新“小巨人”企业营业收入总额超3.7万亿元，同比增长31.5%，比规上中小工业企业高11.6个百分点……近期[详细]
-
如何通过业务集成中心简化系统集成
所属栏目：[大数据] 日期：2022-10-12 热度：689
如果你问一个小学生如何解决代数问题，他们会告诉你从化简开始。对于大多数数据集成问题，我们从一开始就让数据变得太过复杂——我们使用了基于标准的 XML 格式，这看起来似乎很奇怪。
来自Me[详细] -
大数据平台实现环境监测智能化
所属栏目：[大数据] 日期：2022-10-12 热度：4142
所谓大数据，指的是所涉及的资料量规模巨大到无法透过现有的实物计量软件，在合理时间内达到采集、管理并整理出更有价值和意义的结论。这些数据包罗万象，不光包括人们在互联网上发布的信息，全世界的工业设备、[详细]
-
诺和诺德与微软达成合作，将利用大数据和人工智能加速药物开发
所属栏目：[大数据] 日期：2022-10-12 热度：4166
近日，医疗保健公司诺和诺德（Novo Nordisk）与微软宣布达成战略合作，计划将微软的计算服务、云服务技术和人工智能与诺和诺德的药物发现、开发和数据科学能力相结合来开发AI模型。
诺和诺德是一家全球领[详细] -
大数据架构发展的20年
所属栏目：[大数据] 日期：2022-10-12 热度：8534
随着近几年数据湖概念的兴起，业界对于数据仓库和数据湖的对比甚至争论就一直不断。有人说数据湖是下一代大数据平台，各大云厂商也在纷纷的提出自己的数据湖解决方案，一些云数仓产品也增加了和数据湖联动的特性[详细]
-
大数据架构系列：如何理解湖仓一体？
所属栏目：[大数据] 日期：2022-10-11 热度：7810
这十多年大数据技术蓬勃发展，从市场的表现来看基于大数据的数据存储和计算是非常有价值的，其中以云数据仓库为主打业务的公司Snowflake市值最高（截止当前449亿美元），另一家以湖仓一体为方向公司Databricks估[详细]
-
基于Bert的语义相关性建模
所属栏目：[大数据] 日期：2022-10-11 热度：1063
在搜索场景中，相关性定义如下：
对于给定的query和候选Doc，判断二者之间的相关性。
相关性反映了排序的精度，通过对相关性信息进行建模，将其作为特征传入到排序模型，提升搜索模型的排序能力[详细] -
共享百度大数据+能力,跨界融合领跑行业
所属栏目：[大数据] 日期：2022-10-11 热度：3356
大数据技术和业务的兴起，引发了社会对数据开放的强烈需求，数据价值、应用前景备受关注，大数据被越来越多的行业所关注和深挖，正在从“概念”走向“价值”的黄金时代。大数据基于对海量数[详细]
-
315每日一课 | 智慧灯杆大数据展现与应用技术
所属栏目：[大数据] 日期：2022-10-11 热度：6825
大数据技术能等将隐藏于海量数据中的信息和知识挖掘出来，为人类的社会经济动提供依据，从而提高各个领域的运行效率，大大提高整个社会经济的集约化程度。
在我国，大数据将重点应用于以下三大领域：商业[详细] -
大数据学习之八大算法详解
所属栏目：[大数据] 日期：2022-10-11 热度：8657
大数据学习过程中，算法是非常重要的，本文感谢科多大数据公司的冯老师的素材提供，旨在让大家可以快速的了解几大经典算法。
算法一：快速排序法
快速排序是由东尼 · 霍尔所发展的一种排[详细] -
大数据有哪些潜在风险,可以进来看看这篇文章
所属栏目：[大数据] 日期：2022-10-10 热度：9963
随着大数据的发展，整个社会资源的数字化趋势会越发明显，未来数据能够承载的功能也将不断得到拓展，在这种情况下，数据本身的价值会逐步提升，可以说未来谁能掌握的数据也就意味着谁能掌握的资源。所以，大数据[详细]
-
大数据开发入门需要什么掌握的技术
所属栏目：[大数据] 日期：2022-10-10 热度：2120
昨天和三个学计算机专业的学生聊天时聊到了大数据开发方面的话题，他们三个人中大数据开发，有两个已经进入企业开始工作，另外一个还是大二学生，但已经开设了自己的工作室。他们都是从事程序开发方面工作的。[详细]
-
大数据服务平台是什么?有什么用?
所属栏目：[大数据] 日期：2022-10-10 热度：4340
大数据服务平台则是一个集数据接入、数据处理、数据存储、查询检索、分析挖掘等、应用接口等为一体的平台，然后通过在线的方式来提供数据资源、数据能力等来驱动业务发展的服务。
计算机俗称电脑，是一种[详细] -
小米大数据平台OLAP架构演进
所属栏目：[大数据] 日期：2022-10-10 热度：2794
在近期的 Apache Kylin Meetup 北京站上，我们邀请到小米大数据平台 OLAP 负责人陈学辉分享了 Kylin 在小米大数据中的应用。
陈学辉
小米拥有众多产品线，业务遍及全球 80 多个国家和地区，数据[详细] -
工业大数据的搜集与分析是转型智能制造的关键
所属栏目：[大数据] 日期：2022-10-10 热度：6414
以工业4.0为核心的智能制造，已经成为目前全球制造业者共同发展的方向。有别于一般消费性市场需求，在工业生产制造领域的发展上，不仅有强调以工业应用为主的工业人工智能，在数据数据的搜集上，自然也有所谓的工[详细]
-
用 Spark SQL 实行结构化数据处理
所属栏目：[大数据] 日期：2022-06-30 热度：151
Spark SQL 是 Spark 生态系统中处理结构化格式数据的模块。它在内部使用 Spark Core API 进行处理，但对用户的使用进行了抽象。这篇文章深入浅出地告诉你 Spark SQL 3.x 的新内容。 有了 Spark SQL，用户可以编写 SQL 风格的查询。这对于精通结构化查询语言[详细]
-
数据驱动业务的18个有效战略
所属栏目：[大数据] 日期：2022-06-30 热度：96
你老想着数据驱动业务，但发现有力无处使，或者没人鸟你，我也有同样的经历，下面有18条策略锦囊，望你笑纳。 第一条 数据驱动业务中的数据广义来讲不仅仅是指存储在大数据平台的那堆数据(反映客观事实)，也包括战略、组织、机制、流程、人性、认知、客户的[详细]
-
实施合理的数据收集策略的关键性
所属栏目：[大数据] 日期：2022-06-30 热度：168
数据已经成为企业最宝贵的资产之一，而一些企业仍然否认它的重要性，但他们对接受它的犹豫正在消退。一项民意调查发现，36%的企业认为大数据对他们的成功至关重要。 然而，许多企业仍在努力制定持久的数据战略。最主要的一个问题是他们没有可靠的数据收集方[详细]
-
大数据能为建筑能源管理做些啥
所属栏目：[大数据] 日期：2022-06-30 热度：94
近年来，对降低碳排放水平和提高能源效率的兴趣导致智能建筑技术呈指数级增长。 最重要的是，物联网扩大了互连设备和建筑管理系统的可能性，以实现更好的能源管理。然而，真正实现其潜力需要组织和分析楼宇自动化系统生成的大型数据集。 实时管理和维护大数[详细]
