本文原作者：赖博先，经授权后发布。 一、简介 Spark SQL是spark主要组成模块之一，其主要作用与结构化数据，与hadoop生态中的hive是对标的。而DataFrame是spark SQL的一种编程抽象，提供更加便捷同时类同与SQL查询语句的API，让熟悉hive的数据分析工程师能够非常快

自2006年诞生以来，Hadoop技术与社区已走过了13个年头，在经历了大数据技术高速发展之后，迎来了3.x的时代。这些年来，Hadoop如何在腾讯、阿里、滴滴、小米、美团、头条以及京东巧妙落地？在全新的时期，有哪些方向值得关注？Hadoop技术社区又将走向何方？2019年8月10日，Hadoop将

* 后厂村在哪？到底有多大？ * 传说中月入5万的“村民“是怎样一种存在？ * 村民们进趟村容易吗？正确的进村姿势是什么？ * 赚着月薪5万的工资，过着月薪5千的生活，这是真的吗？ 不知从何时起，后厂村取代五道口成为北京城里新的“宇宙中心”。扎堆在这个方寸之间的各大公司，可以说占据了中国互联网版图的

今天的安全不仅仅是企业发展的底线，也是天花板，企业能不能通过云平台实现风险抵御等等，这都是企业必须要在接入云平台前要首先考量的问题，如果将云比喻为一条高速公路的话，安全就是保证这条高速公路高速畅行的关键。 腾讯副总裁丁珂在刚刚结束的CSS 2019上带来的比喻，掀起新一轮云安全的讨论。在云安全专场上

自2006年诞生以来，Hadoop技术与社区已走过了13个年头，在经历了大数据技术高速发展之后，迎来了3.x时代。Hadoop如何在腾讯、阿里、滴滴、小米、美团、头条以及京东巧妙落地？有哪些新方向值得关注？Hadoop技术社区又将走向何方？ 今天，Hadoop将首次在中国组织Meetup，为你揭晓大

近日，在Apache Hadoop社区主导及邀请下，腾讯开源、腾讯大数据、腾讯云联合承办了Hadoop技术社区在中国的首次Meetup。围绕Hadoop技术实践，来自腾讯、Cloudera、京东、小米、阿里、滴滴、华为、字节跳动的多位嘉宾参与了分享讨论。 腾讯开源运营负责人王春雨表示：“中国企业的参

近日，在Apache Hadoop社区主导及邀请下，腾讯开源、腾讯大数据、腾讯云联合承办了Hadoop技术社区在中国的首次Meetup。围绕Hadoop技术实践，来自腾讯、Cloudera、京东、小米、阿里、滴滴、华为、字节跳动的多位嘉宾参与了分享讨论。 腾讯开源运营负责人王春雨表示：“中国企业的参

| 导语 8月24日，北京快手总部，云+社区邀您参加《大数据技术实践与应用》沙龙活动，聚焦大数据实践与应用，深度解读大数据实践案例，探讨前沿话题，共创价值。 在大数据技术飞速发展的今天，有哪些火热的大数据前沿技术？它们又是如何应用于业务实践的呢？ 本期沙龙腾讯云联合快手带来大数据实践案例分享，聚焦在

8月25日上午，重庆市有关领导与腾讯公司董事会主席兼首席执行官马化腾等腾讯公司高层，共同出席了腾讯西南总部大厦启用典礼仪式。 会上，重庆市政府与腾讯公司签署全面深化战略合作协议。此外，腾讯还与市委组织部、市住房城乡建委、市文化旅游委、市大数据发展局、重庆市税务局、两江新区管委会、悦来投资集团、南川区

8月29日，2019世界人工智能大会教育行业主题论坛上，腾讯与上海市教育委员会（以下简称“上海市教委”）签署战略合作协议。今后，双方将基于互联网、大数据、人工智能的教育应用基础，在上海市打造智慧校园试点，并深入推进智慧校园建设，建立“覆盖全市、统一标准、上下联动、资源共享”的移动智慧校园体系。腾讯将

这些年，大数据作为一个时髦概念，出现频率很高，关注度也很高。 对于很多人来说，当他第一次听到“大数据”这个词，会自然而然从字面上去理解——认为大数据就是大量的数据，大数据技术就是大量数据的存储技术。 但是，事实并非如此。 大数据比想象中复杂。它不只是一项数据存储技术，而是一系列和海量数据相关的抽取、

近日，Elasticsearch 的创始人兼首席执行官Shay Banon 向腾讯云发出了一封“特别”的邮件，专程对腾讯团队为Elasticsearch开源社区做出的贡献表示了感谢。 据了解，腾讯工程师通过提交代码，成功优化了Elasticsearch高并发写入性能，实现将1000万数据量的写入时长

导语：Atlas 是一个可扩展的核心基础治理服务集 - 使企业能够有效地和高效地满足 Hadoop 中的合规性要求，并允许与整个企业数据生态系统的集成。该项目用于管理共享元数据、数据分级、审计、安全性以及数据保护等各个方面，是数据治理的重要组成部分。本文介绍Atlas的存储子系统，分析Atlas的存

AI、5G、云计算、大数据等信息化最新成果涌现的同时，信息安全再度成为关注焦点。 如何通过大数据的分析及可视化呈现，让全国网络设备的安全情况一目了然，实现全网安全态势可知、可见、可控？ 近日，由工业和信息化部、北京市人民政府共同主办的2019第23届中国国际软件博览会在京举行。作为软件和信息技术服务

守护者计划 Tencent Guardian Project 守护者计划，是腾讯践行“科技向善”使命，联合政府、企业等社会各界力量构筑的网络安全生态体系。旨在用科技为公民信息安全提供全方位保护，协助司法机关打击网络黑产及其它犯罪，从源头治理电信网络诈骗。并且通过立体化的宣传，强化公民网络安全意识，降