数据挖掘
-
Spark SQL 物化视图技术原理与实践
物化视图主要用于预先计算并保存表连接或聚合等耗时较多的操作的结果，这样，在执行查询时，就可以避免进行这些耗时的操作，从而快...
2020-08-09 01:26:17 -
处理数据时也保证安全，IBM发布Linux版完全同态加
6 月初，IBM 发布了适用于 macOS 和 iOS 的完全同态加密（Fully Homomorphic Encryption，FHE）工具包，并表示 Linux 版本将在数周内推出。现在 Linux 版...
2020-08-09 01:26:06 -
RedMonk Q3语言排行：Rust首次进前20
知名软件行业分析公司 RedMonk 发布了 2020 年 6 月（Q3 季度）编程语言排行榜。RedMonk 编程语言排行榜通过追踪编程语言在 GitHub 和 Stack Overf...
2020-08-09 01:25:55 -
GCC并行编译大型源代码文件性能大幅提升
虽然 GNU Make 和其他构建系统可以很好地进行扩展以并发编译大量文件，不过 GCC 自身也一直在让 GCC 的更多工作在编译大型源代码文件时能够...
2020-08-04 00:26:36 -
深度传感器都有哪些创业机会？
以前，我们一直认为传统相机将3D世界转换为2D图像，已可以满足我们对于图像的应用，而2D图像中丢失的三维似乎并不重要。但随着计算机...
2020-08-04 00:26:22 -
微服务架构的核心关键点
当我们架构微服务应用时首先遇到的一个问题是，作为消费者如何访问并调用服务提供者所提供的服务，作为服务提供者如何能让服务消费...
2020-08-04 00:26:12 -
Node.js 在大前端领域的应用分析
关于 node 的使用已经很久了，使用范围也很广，似乎有前端的地方就有 node，那么来思考一个问题，node 到底是用来干嘛的呢？本文从五个大...
2020-08-04 00:25:59 -
NVIDIA和佛罗里达大学建最快超级计算机
7 月 21 日，佛罗里达大学宣布，与英伟达建立公私合作伙伴关系，为学生、教职员工和研究人员提供最强大的 AI 训练和工具，打造全球高校...
2020-07-31 11:32:07 -
Spark on K8S 的最佳实践和需要注意的坑
Spark 哪个地方需要用到 K8S 呢？K8S 是 Spark 上全新的集群管理和调度系统，其他三个资源管理和调度为 Standalone、YARN 以及 Apache Mesos。YARN 集群...
2020-07-31 11:31:48 -
22款好用的CLI工具
Shell- 毋庸置疑，在终端中，Shell 是使用最频繁也最重要的工具。过去，我曾经使用过 Bash 和 Z Shell，而如今，我正在使用的是 Fish Shell。这是...
2020-07-31 11:31:36 -
Netflix 微服务架构设计解析
数年来，Netflix 一直是全球体验最好的在线订阅制视频流媒体服务，其流量占全球互联网带宽容量的 15％以上。 在过去的2019 年，Netflix 已经...
2020-07-31 11:31:24 -
Google第四代TPU 细节曝光！MLPerf榜单决战英伟达
2018年，谷歌在其年度 I/O 开发者大会上宣布了第三代产品，在今天上午刚刚揭开了第四代TPU产品的神秘面纱，该产品目前尚处于研发阶段。...
2020-07-31 11:31:07 -
为什么我不喜欢数据库三范式？
数据库的这个三范式的概念，相信大多数人都不会陌生，从懵懵懂懂的大学时代就已经普及到教材了（没记错的话应该在数据库系统概论这...
2020-07-31 11:30:56 -
Spark 3.0重磅发布！开发近两年，流、Python、SQL重
Spark 诞生于加州大学伯克利分校的 AMPLab 实验室，该实验室致力于数据密集型计算的研究。AMPLab 研究人员与大型互联网公司合作，研究如何...
2020-07-31 11:30:39 -
亿级 ELK 日志平台构建实践
Filebeat：轻量级数据收集引擎。基于原先 Logstash-fowarder 的源码改造出来。换句话说：Filebeat就是新版的 Logstash-fowarder，也会是 ELK Stack 在 Ag...
2020-07-31 11:30:25 -
去Oracle实录：如何在线更换金融核心场景中的数
陆金所从 2018 年启动全站去 O 项目以来，在不做任何服务降级的情况下，历时 2 年通过上百次变更，把全站 98% 的 Oracle 数据库无缝切换到...
2020-07-31 11:30:09 -
React 中请求远程数据的四种方法
React 是一个专注的组件库。因此，它对如何请求远程数据没有什么建议。如果要通过 HTTP 请求数据并将其发送到 Web API，可以考虑下面四种方...
2020-07-31 11:29:59 -
图文了解 Kafka 的副本复制机制
让分布式系统的操作变得简单，在某种程度上是一种艺术，通常这种实现都是从大量的实践中总结得到的。Apache Kafka 的受欢迎程度在很大程...
2020-07-31 11:29:43 -
怎样利用开源软件赚钱？
2010 到 2011 年，Mike Jumper 启动了 Guacamole 项目。这是一个多协议网关，它可以让管理员安全地提供远程桌面。因为客户端界面是在浏览器中运...
2020-07-25 23:50:48 -
下一代构建工具 Gradle ，比 Maven 强在哪里！
最传统的安装方法就是去gradle官网下载二进制包，解压，然后将路径添加到环境变量中。如果你没什么其他需求，可以使用这种安装方式。...
2020-07-25 23:50:36 -
一文读懂GNSS技术
2020年6月23日9点43分，我国在西昌卫星发射中心成功发射了北斗系统第五十五颗导航卫星，也是北斗三号的最后一颗全球组网卫星。至此，北...
2020-07-25 23:50:23 -
高可用Redis服务架构分析与搭建
基于内存的Redis应该是目前各种web开发业务中最为常用的key-value数据库了，我们经常在业务中用其存储用户登陆态（Session存储），加速一些...
2020-07-25 23:50:13 -
Kafka 集群在马蜂窝大数据平台的优化与应用扩展
Kafka 是当下热门的消息队列中间件，它可以实时地处理海量数据，具备高吞吐、低延时等特性及可靠的消息异步传递机制，可以很好地解决...
2020-07-25 23:49:59 -
如何让你的Nginx 提升10倍性能？
提升Web应用的性能从未像今天这样刻不容缓。在线经济活动的比例日益提高，就连发展中国家和地区的经济活动都已经有5%以上在线进行了（...
2020-07-25 23:49:43 -
2020 年 7 月编程语言排行榜
TIOBE 2020 年 7 月份的编程语言排行榜已经公布，官方的标题是：R 语言的排名达到了历史最高位。R 语言一种自由软件编程语言与操作环境，...
2020-07-23 00:27:11 -
8场5胜，微服务VS单体架构
越来越多的组织开始放弃单体应用，逐步转向微服务的架构模式–将业务流程分为多个独立的服务。例如，在一个机票预订中，就可能涉及...
2020-07-23 00:27:02 -
Science评论：量子计算目前最大的挑战，在0和1之
2019年10月，谷歌的一项关于量子计算的研究登上了Nature封面。谷歌声称用53个量子比特的量子计算机Sycamore实现了quantum supremacy，引起了学界...
2020-07-23 00:26:51 -
Python 为什么推荐蛇形命名法？
关于变量的命名，这又是一个容易引发程序员论战的话题。如何命名才能更具有可读性、易写性与明义性呢？众说纷纭。本期“Python为什么...
2020-07-23 00:26:39 -
Redis 6.0 除了多线程，别忘了这个牛逼特性！
当tracking开启时， Redis会quot;记住quot;每个客户端请求的key，当key的值发现变化时会发送失效信息给客户端(invalidation message)。失效信息可以通...
2020-07-23 00:26:29 -
分布式图数据库在贝壳的应用实践
图数据库的应用场景非常广：搜索、推荐、关系图谱、知识图谱等等。目前贝壳也有各种场景需要使用到图数据库，但选型各不相同，有的...
2020-07-23 00:26:18 -
5个基本Linux命令行工具的现代化替代品
在日常使用 Linux/Unix 系统时，我们会使用许多命令行工具来完成我们的工作，并理解和管理我们的系统，像 du 用于监视磁盘利用率，top 用于...
2020-07-23 00:26:09 -
深度解读：Flink 1.11 SQL 流批一体的增强与完善
7 月 6 日，Apache Flink 1.11 正式发布。从 3 月初进行功能规划到 7 月初正式发版，1.11 用将近 4 个月的时间重点优化了 Flink 的易用性问题，提升...
2020-07-23 00:25:59 -
分布式架构——Gossip 协议详解
Gossip协议是基于六度分隔理论（Six Degrees of Separation）哲学的体现，简单的来说，一个人通过6个中间人可以认识世界任何人。数学公式是：...
2020-07-23 00:25:49 -
开源软件脱险！Linux硬核回应美实体清单：已开源
开源技术会被美国管制吗？这应该是一年来中国技术从业者最关心的问题。随着中美关系日益紧张，技术圈也受到波及，前两周，国商务部...
2020-07-23 00:25:40 -
技术选型：没有谷歌的命，得了谷歌的病
1998 年的谷歌和今天的谷歌相差甚远，他们也是利用了一定技巧和捷径才走到今天的位置。谷歌也曾从小鱼慢慢发展为庞然大物。如果没有强...
2020-07-23 00:25:31
