大数据分析的几个方法

DES

数据加密标准(英语：Data Encryption Standard，缩写为 DES)是一种对称密钥加密块密码算法。DES算法的入口参数有三个：Key、Data、Mode。

Key: 7个字节共56位，是DES算法的工作密钥;

Data: 8个字节64位，是要被加密或被解密的数据;

Mode: 加密或解密。

3DES

三重数据加密算法(英语：Triple Data Encryption Algorithm，又称3DES(Triple DES)，是一种对称密钥加密块密码，相当于是对每个数据块应用三次数据加密标准(DES)算法。

AES

AES，高级加密标准(英语：Advanced Encryption Standard)，在密码学中又称Rijndael加密法，是美国联邦政府采用的一种区块加密标准。

采用对称分组密码体制，密钥长度为 128 位、 192 位、256 位，分组长度128位

相对于DES ，AES具有更好的 安全性、效率 和 灵活性。

非对称加密算法

非对称加密算法需要两个密钥：公钥和私钥。公钥与私钥是成对存在的，如果用公钥对数据进行加密，只有用对应的私钥才能解密。主要的非对称加密算法有：RSA、Elgamal、DSA、D-H、ECC。


 

MAC算法家族

MAC算法 MAC(Message Authentication Code，消息认证码算法)，是带密钥的Hash函数。输入密钥和消息，输出一个消息摘要。它集合了MD和SHA两大系列消息摘要算法。

MD 系列算法: HmacMD2、HmacMD4 和 HmacMD5 ;

SHA 系列算法：HmacSHA1、HmacSHA224、HmacSHA256、HmacSHA384 和 HmacSHA512 。

对称加密算法

加密和解密使用「相同密钥」的加密算法就是对称加密算法。常见的对称加密算法有AES、3DES、DES、RC5、RC6等。


 

但是，这个领域有很多新的SQL和NoSQL技术。

例如，Facebook Presto的分支Starburst，又获得了4,200万美元的资金。 Starburst是Facebook开源项目(Presto)的衍生产品。 Starburst的目标是创建Presto的企业版，因为Presto本身不具有访问管理功能，Teradata，Snowflake和DB2等企业系统的连接器，或者用户可以在其中配置集群以自动扩展的管理控制台。

对于大多数公司来说，这使Presto很难单独使用。 真可惜，因为Presto允许您轻松地跨数据库运行查询，而无需将数据加载到数据仓库中。

因此，最近为Starburst提供的资金非常值得一看。 我们期待看到这项技术的发展方向，并希望更多的公司可以利用Presto的优势，而不必麻烦管理Presto的所有复杂性。

当我们谈论像Presto这样的分布式数据库系统时，本月另一个有趣的发展是Spark 3.0的发布。 新版本的Spark带来了许多增强功能。 其中许多增强功能旨在使Spark SQL变得更符合ANSI SQL。

这是重要的说明。 一种似乎仍然正确的模式是您无法照原样摆脱SQL。 许多工具和技术已尝试开发其查询语言。 但是，归根结底，SQL仍然存在-与许多已经淘汰的编程语言不同。

SQL仍然是数据的语言。

您的团队如何利用您的数据?

数据库和SQL不会无处可去。 如果有的话，它们正变得越来越普遍。 诸如Starburst和PopSQL之类的工具显示出让您的工程师，分析师，甚至您的非技术人员都精通数据的重要性。

这些技术或类似技术肯定会在大小公司中大量使用，因此它们可以帮助改善决策。

我们喜欢看到PopSQL和Starburst等工具。 这些工具通过使SQL更具协作性并简化诸如Presto之类的强大技术的部署来打开数据世界。 这有助于提高公司执行数据分析，做出更好的决策和开发更好的数据流程的能力。

这样一来，我们将总结每两周一次的数据和技术世界动态。 我们的目标是继续提供有关新兴技术，风险投资等方面的未来更新。

（编辑：漯河站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!