-
Go多协程并发环境下的错误治理
所属栏目：[编程] 日期：2021-11-02 热度：123
在Go语言中，我们通常会用到panic和recover来抛出错误和捕获错误，这一对操作在单协程环境下我们正常用就好了，并不会踩到什么坑。但是在多协程并发环境下，我们常常会碰到以下两个问题。假设我们现在有2个协程，我们叫它们协程A和B好了：如果协程A发生了pa[详细]
-
浅析 Go 与 C 的指南
所属栏目：[编程] 日期：2021-11-02 热度：90
C 和 Go 都相同： 运算符取出变量所在的内存地址* 运算符取出指针变量所指向的内存地址里面的值，也叫 解引用 C 语言版示例：#include stdio.hint main(){ int bar = 1; // 声明一个指向 int 类型的值的指针 int *ptr; // 通过 取出 bar 变量所在的内存地址[详细]
-
如何引用Python对Gif进行压缩
所属栏目：[编程] 日期：2021-11-02 热度：164
前天在给微信公众号上传文章的时候，文章里面有一个图片是gif的，在上传的过程中报错了，说是图片超大了。搜索之后发现图片需要小于5m。那么问题就转化为怎么把当前的gif给缩减到5m以内本着有轮子用轮子，没有轮子造轮子的精神，网上搜索一番。发现一些现象[详细]
-
Python 第三方库大全，看这一篇文章就可以了！
所属栏目：[编程] 日期：2021-11-02 热度：62
管理 Python 版本和环境的工具p：非常简单的交互式 python 版本管理工具。pyenv：简单的 Python 版本管理工具。Vex：可以在虚拟环境中执行命令。virtualenv：创建独立 Python 环境的工具。virtualenvwrapper：virtualenv 的一组扩展。buildout：在隔离环境[详细]
-
人人都能看明白的Python装饰器入门教程！
所属栏目：[编程] 日期：2021-11-02 热度：156
之前的文章中提到，很多人认为理解了装饰器的概念和用法后，会觉得自己的 Python 水平有一个明显的提高。但很多教程在一上来就会给出装饰器的定义以及基本用法，例如你一定会在很多文章中看到例如代码运行时间计时器等相关常用装饰器。直接从应用入手这样学[详细]
-
关于Go程序错误处理的一些提议
所属栏目：[编程] 日期：2021-11-02 热度：170
Go的错误处理这块是日常被大家吐槽较多的地方，我在工作中也观察到一些现象，比较严重的是在各层级的逻辑代码中对错误的处理有些重复。比如，有人写代码就会在每一层都判断错误并记录日志，从代码层面看，貌似很严谨，但是如果看日志会发现一堆重复的信息，[详细]
-
HDFS中的Java和Python API接口连接
所属栏目：[编程] 日期：2021-11-02 热度：170
上次介绍了HDFS的简单操作，今天进入HDFS中的Java和Python的API操作，后面可能介绍Scala的相关的。在讲Java API之前介绍一下使用的IDEIntelliJ IDEA ，我本人使用的是2020.3 x64的社区版本。Java API创建maven工程，关于Maven的配置，在IDEA中，Maven下载源[详细]
-
Hbase集群挂掉的一次惊险经历
所属栏目：[编程] 日期：2021-11-02 热度：174
上次介绍了HDFS的简单操作，今天进入HDFS中的Java和Python的API操作，后面可能介绍Scala的相关的。在讲Java API之前介绍一下使用的IDEIntelliJ IDEA ，我本人使用的是2020.3 x64的社区版本。Java API创建maven工程，关于Maven的配置，在IDEA中，Maven下载源[详细]
-
谷歌推出新开源语言Logica：用于大数据处理
所属栏目：[编程] 日期：2021-11-02 热度：174
在推出诸如 Go 和 Dart 等编程语言之后，谷歌工程师现在又推出了全新的 Logica。它是此前谷歌推出编程语言 Yedalog 的继任者，可以编译成 SQL，并能在 Google BigQuery 上运行，实验性地支持 PostgreSQL 和 SQLite 数据库。Logica 是一种用于数据操作的声明[详细]
-
分布式文件系统HDFS及其简单使用
所属栏目：[编程] 日期：2021-11-02 热度：115
在现代的企业环境中，单机容量往往无法存储大量数据，需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统。HDFSHDFS(Hadoop Distributed File System)是 Apache Hadoop 项目的一个子项目. Hadoop 非常适于存储大型数据 (比如 TB 和 PB), 其[详细]
-
Hive 和 Spark的爱恨情仇恩怨交织
所属栏目：[编程] 日期：2021-11-02 热度：135
最近在面试一些应聘大数据岗位的技术小伙伴时，发现不少朋友对业界 所谓的hive on spark和spark on hive分不太清楚;同时在日常工作中，也因为对这两个技术术语的理解不太一致，影响了进一步的技术交流。所以在这里，明哥想跟大家聊聊 hive 和 spark的爱恨情[详细]
-
大数据开发：Java线程与进程区别是这样？
所属栏目：[编程] 日期：2021-11-02 热度：65
在JAVA中几乎任何的操作系统都支持运行多个任务，通常一个任务就是一个程序，而一个程序就是一个进程。当一个进程运行时，内部可能包括多个顺序执行流，每个顺序执行流就是一个线程。一、什么是进程进程是资源(CPU、内存等)分配的基本单位，它是程序执行时[详细]
-
火山引擎正式发布大数据研发治理套件
所属栏目：[编程] 日期：2021-11-02 热度：168
在JAVA中几乎任何的操作系统都支持运行多个任务，通常一个任务就是一个程序，而一个程序就是一个进程。当一个进程运行时，内部可能包括多个顺序执行流，每个顺序执行流就是一个线程。一、什么是进程进程是资源(CPU、内存等)分配的基本单位，它是程序执行时[详细]
-
大数据安全分析之大数据技术有什么优势
所属栏目：[编程] 日期：2021-11-02 热度：121
首先，可以海量数据存储。随着信息化与网络安全建设的发展，企业的信息系统、安全设备越来越多，所产生的告警、日志等安全数据也呈爆发式增长，传统安全分析技术一直无法解决海量数据的实时处理与海量存储的问题。传统关系型数据库的数据处理效率在3000EPS[详细]
-
学大数据一定要会Java开发吗？
所属栏目：[编程] 日期：2021-11-02 热度：82
Java是目前使用广泛的编程语言之一，具有的众多特性，特别适合作为大数据应用的开发语言。Java语言功能强大和简单易用，不仅吸收了C++语言的各种优点还摒弃了C++里难以理解的多继承、指针等概念。Java跨平台应用能力，比C、C++更易用更容易上手。同时还具有[详细]
-
企业数据应用的数据驱动阶段
所属栏目：[编程] 日期：2021-11-02 热度：78
而随着企业业务数据的不断丰富，加上大数据和人工智能技术的成熟和应用，企业管理者们在迈进DT时代后又开始了新一轮的探索：在应对海量原始业务数据无法直接被业务使用的问题时，业务部门根据需求自建大数据团队以及相应的数据处理能力，通过汇聚、清洗、建[详细]
-
Hbase集群挂掉的一次惊魂经历
所属栏目：[编程] 日期：2021-11-02 热度：54
本指南介绍了AWS、Microsoft Azure和谷歌Cloud提供的网络、基础设施、数据和应用程序安全功能，以防止网络攻击，保护基于云的资源和工作负载。在选择公共云服务提供商时，企业面临的最大考虑是它们提供的网络安全水平，这意味着它们为保护自己的网络和服务[详细]
-
谷歌上线新开源语言Logica：用于大数据处理
所属栏目：[编程] 日期：2021-11-02 热度：183
在推出诸如 Go 和 Dart 等编程语言之后，谷歌工程师现在又推出了全新的 Logica。它是此前谷歌推出编程语言 Yedalog 的继任者，可以编译成 SQL，并能在 Google BigQuery 上运行，实验性地支持 PostgreSQL 和 SQLite 数据库。Logica 是一种用于数据操作的声明[详细]
-
分布式文件系统HDFS及其简单引用
所属栏目：[编程] 日期：2021-11-02 热度：130
在现代的企业环境中，单机容量往往无法存储大量数据，需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统。HDFSHDFS(Hadoop Distributed File System)是 Apache Hadoop 项目的一个子项目. Hadoop 非常适于存储大型数据 (比如 TB 和 PB), 其[详细]
-
Hive 与 Spark的爱恨情仇恩怨交织
所属栏目：[编程] 日期：2021-11-02 热度：165
最近在面试一些应聘大数据岗位的技术小伙伴时，发现不少朋友对业界 所谓的hive on spark和spark on hive分不太清楚;同时在日常工作中，也因为对这两个技术术语的理解不太一致，影响了进一步的技术交流。所以在这里，明哥想跟大家聊聊 hive 和 spark的爱恨情[详细]
-
大数据开发：Java线程与进程差异是这样？
所属栏目：[编程] 日期：2021-11-02 热度：110
在JAVA中几乎任何的操作系统都支持运行多个任务，通常一个任务就是一个程序，而一个程序就是一个进程。当一个进程运行时，内部可能包括多个顺序执行流，每个顺序执行流就是一个线程。一、什么是进程进程是资源(CPU、内存等)分配的基本单位，它是程序执行时[详细]
-
火山引擎正式公布大数据研发治理套件
所属栏目：[编程] 日期：2021-11-02 热度：103
在数字化程度日益加深的今天，数据对企业增长的作用越来越重要。随着十九届四中全会正式把数据列为国家新兴基础性战略资源和生产要素，如何使用并发挥数据的价值，是当下企业所面临的主要问题。然而企业的数字化转型并非一蹴而就，需要在组织、业务流程和技[详细]
-
大数据安全分析之大数据技术有何优势
所属栏目：[编程] 日期：2021-11-02 热度：130
在数字化程度日益加深的今天，数据对企业增长的作用越来越重要。随着十九届四中全会正式把数据列为国家新兴基础性战略资源和生产要素，如何使用并发挥数据的价值，是当下企业所面临的主要问题。然而企业的数字化转型并非一蹴而就，需要在组织、业务流程和技[详细]
-
学大数据确定要会Java开发吗？
所属栏目：[编程] 日期：2021-11-02 热度：178
Java是目前使用广泛的编程语言之一，具有的众多特性，特别适合作为大数据应用的开发语言。Java语言功能强大和简单易用，不仅吸收了C++语言的各种优点还摒弃了C++里难以理解的多继承、指针等概念。Java跨平台应用能力，比C、C++更易用更容易上手。同时还具有[详细]
-
企业数据应用的数据还在驱动阶段
所属栏目：[编程] 日期：2021-11-02 热度：176
而随着企业业务数据的不断丰富，加上大数据和人工智能技术的成熟和应用，企业管理者们在迈进DT时代后又开始了新一轮的探索：在应对海量原始业务数据无法直接被业务使用的问题时，业务部门根据需求自建大数据团队以及相应的数据处理能力，通过汇聚、清洗、建[详细]
浙公网安备 33038102330483号