Hadoop Architecture and Core Components – Introduction
作者：禅与计算机程序设计艺术 1.简介Hadoop是一个分布式数据处理系统，主要面向批处理和实时分析的数据集上进行计算任务。它由两个主要组件组成，分别是Hadoop Distributed File System（HDFS）和MapReduce。HDFS是一个存
人工智能智能车辆的应用场景和挑战
作者：禅与计算机程序设计艺术 近年来，随着人工智能技术的不断进步、传感器技术的革命、芯片的出现和普及、移动互联网的发展等新兴技术的引入，无论是自然界还是人类社会都在发生着前所未有的变化。如此多的技术资源的综合利用，让各行各业的人们得以进行高度协同的工作，使人类的
构建大型企业应用程序：Scala和Hadoop的最佳实践
作者：禅与计算机程序设计艺术 随着大数据和云计算技术的兴起，很多大型企业正在构建面向海量数据的大型分布式应用程序。这些应用程序一般由多个独立的小模块组成，这些模块需要分布在不同的服务器上进行通信，数据需要存储到海量的磁盘和内存中，并且需要处理复杂的业务逻辑。由于
HBase深度解析：HBase在大数据应用中的角色
Apache HBase是一个开源的分布式数据库系统，能够处理超大量的数据。相对于关系型数据库，HBase提供更高的容错性、可扩展性和高性能。本文将从HBase的历史和特性出发，到其最新版本中所增加的新功能以及其在大数据应用中的作用。Apache HBase是一个分布式的、面向列的、可伸缩的存储系统
数据科学家对AI和机器学习的认知
作者：禅与计算机程序设计艺术 1.简介数据科学家的角色如今已经越来越重要，越来越多的人选择从事这一职业。尽管数据科学家可能并不一定会涉及到所有具体的机器学习或深度学习技术，但他们肩负着许多核心责任，包括收集、分析、理解和处理海量数据、设计并实施有效的数据科学方法
人工智能隐私保护：技术解决方案
作者：禅与计算机程序设计艺术 1.简介摘要随着科技的飞速发展，人工智能技术已成为当今时代的重要力量之一，无论是从医疗健康领域到社会经济领域都在逐步实现落地。然而，人工智能的关键技术之一——深度学习，也带来了新的安全和隐私问题。本文将阐述目前人工智能技术在数据安全
大数据智能决策系统架构：数据收集与预处理
作者：禅与计算机程序设计艺术 1.简介一、引言随着互联网、大数据、云计算的发展，越来越多的人能够接受并依赖于网络服务。但是，如何有效地利用这些数据进行智能决策，成为各个企业面临的重大课题。如何从海量的数据中提取有效信息，对企业管理具有重要意义。如何将海量的、复杂
对话式 AI 项目实战系列 NLP 篇 (173)
作者：禅与计算机程序设计艺术 1.简介随着人工智能技术的发展和落地，对话系统、机器学习和自然语言处理等新兴领域成为热门研究方向。而在此过程中，数据积累、训练模型和部署上线都是一个非常复杂的过程，如何更加有效、准确地完成这些任务就成为了一个重要问题。本期博文将从零
架构师必知必会系列：人工智能与机器学习架构
作者：禅与计算机程序设计艺术 1.简介机器学习(ML)是一个正在蓬勃发展的新领域，它可以用来解决复杂的问题、提升产品的性能、改善用户体验等方面的应用场景。随着机器学习技术的不断进步，越来越多的公司和个人将人工智能（AI）技术纳入到自己的产品或服务中，实现更加智能
Harnessing the Power of Big Data in Public Transportati
作者：禅与计算机程序设计艺术 1.简介在公共交通运营中，拥有高质量、及时准确的大数据基础设施非常重要。当前全球公共交通领域的数据处理规模正在以指数级增长。通过对不同类型数据的分析、挖掘、存储和计算，以及通过智能预测和决策支持等手段，有效地运用大数据资源可以提供高
人工智能在智能制造自动化中的安全和隐私保护
作者：禅与计算机程序设计艺术 人工智能（Artificial Intelligence, AI）和智能制造自动化（Intelligent Manufacturing Automation, IMA）是一个新兴领域，这两个词经常被放在一起讨论。这其中，AI又是一个
Spring Boot Testing： 使用springboot-test提供的测试框架来实现自动化测试
软件测试是在开发过程中不可缺少的一环。单元测试、集成测试、功能测试等都是为了保证系统的质量而进行的测试活动。单元测试主要验证各个模块（类、方法）在各种情况下是否正常工作；集成测试则是将不同模块组合起来看是否可以正常运行；功能测试则是在用户角度上验证系统是否满足其需求。如此多样化的测试类型是为了确保系
最强Python开源库PyTorch入门实战(案例实战)+快速上手TorchServe
作者：禅与计算机程序设计艺术 1.简介在过去几年里，深度学习领域涌现了一大批高水平的模型，这些模型基于大量的数据和GPU计算能力实现了炫酷的效果。这其中最具代表性的是卷积神经网络（Convolutional Neural Networks, CNN），其网络结构
深入理解 Flink Time and Windows
作者：禅与计算机程序设计艺术 1.简介Apache Flink是一个开源的分布式流处理平台，它的运行时就是基于数据流模型的实时计算引擎，能够处理实时的大规模数据流。Flink提供Java、Scala、Python、Golang等多种编程语言API接口及多种批处理
【人工智能的数学基础】深度学习中的不确定性(Uncertainty)
偶然不确定性捕获了观测中固有的噪声，比如在物体的边界或远离相机的物体上的偶然不确定性会增加。认知不确定性是由对数据认知的缺乏导致的，比如在语义和视觉上更具挑战性的像素的认知不确定性较大。通过计算这些近似后验结果的方差(回归问题)或熵(分类问题)，可以给出认知不确定性的估计值。对于域外的新数据样本，引
人工智能在医疗领域的应用，如何提升医疗服务的质量和效率
作者：禅与计算机程序设计艺术 近年来，随着人工智能（AI）在医疗领域的快速发展，越来越多的医院、研究机构、科研人员、制药公司、保险公司纷纷开始关注并尝试利用人工智能技术进行疾病诊断和疾病预防。其中，包括中国国家医疗健康委员会、美国加州大学洛杉矶分校、德国汉斯大学
结构化数据处理与分析：Spark SQL 教程
作者：禅与计算机程序设计艺术 1.简介1.1 概述Apache Spark 是由 Apache 基金会开发的开源分布式计算框架，最初用于对大规模数据进行快速的处理，在大数据计算领域占据重要地位。其独特的高性能处理能力及丰富的数据处理功能使得 Spark 在各个
Spark Streaming 模型实践:
作者：禅与计算机程序设计艺术 1.简介概述Apache Spark™ 是开源的、快速的、通用大数据分析引擎，它支持多种编程语言，包括 Scala、Java、Python、R 和 SQL。Spark 提供了高级的 API 来处理数据流，同时还具有强大的机器学习能力
【开发者启示】如何利用人工智能提升游戏品质
作者：禅与计算机程序设计艺术 随着游戏行业的蓬勃发展，游戏产业正在经历着一场全新的变革。越来越多的游戏公司纷纷转型游戏研发与制作，主攻手游、页游、网游等不同类型游戏。而游戏行业的发展也在与快速发展的硬件、网络、软件技术的驱动下加速推进。因此，游戏开发企业的竞争力
【人工智能】实现非局部加速器算法的奥秘
随着计算机技术的飞速发展，深度学习和神经网络的火热，人工智能领域的研究也呈现出爆炸性的增长。近几年，“非局部加速器（NLA）”的概念越来越火热，其关键在于如何提升计算效率。然而，对于NLA的实际应用效果如何，目前还没有形成统一的定论，因而需要进一步的探索。本文将从理论、实践和前沿方向三个方面对这一重
