• Hadoop运维记录 | Zeppelin启用https和Hack内核的过程

    今天给大家分享一篇来自于某大公司运维工程师的文章。在Linux运维的工作中,大数据运维总是要与hadoop打交道,那么在面对hadoop相关问题的时候,运维工程师应该怎么做?又该如何提高自己的效率呢? 本文是在工作过程中讲Zeppelin启用https过程和Hack内核以满足客户需求的记录。 原因是这客户很有意思,该客户中国分公司的人为了验证内网安全性,从国外找了一个渗透测试小组对Zeppelin…

  • 大数据高手和你只差这100篇论文

    导读 PayPal高级工程总监Anil Madan写了这篇大数据的文章,一共有100篇大数据的论文,涵盖大数据技术栈,全部读懂你将会是大数据的顶级高手。当然主要是理解大数据技术的整个框架,关于我们学习大数据有莫大益处。 开源(Open Source)用之于大数据技术,其作用有二:一方面,在大数据技术革新之路上,开源在众人之力和众人之智推进下,摧枯拉朽,吐故纳新,扮演着十分重要的推进作用。另一方面,…

  • 大数据对于我们的生活有哪些便利(图)

    大数据现在无处不在了,可太多数人其实并不了解大数据到底是什么、能做什么用。以至很多的公司都守着一堆大数据,却不知如何应用。 那么让我们看看大数据到底跟我们的生活有什么样的关联吧。 大数据对个人财富情况能控制得一清二楚,是预防糜烂的有利武器。 大数据可以经过车辆注销、海外旅游、银行卡消费等信息查个税交纳信息,按条件选择出偷漏税可疑者,中止进一步查实。 如今人们有了把人类基因档案序列化的才能,大数据将…

  • 【大咖讲堂-159期】初涉Hadoop-搭建自己的专属Hadoop集群

    大数据(big data)目前已然成为IT行业中最时髦的词汇之一,然而真正了解大数据的人却不多。大数据到底是什么?能给我们带来什么好处?作为技术人员,又能在大数据中发现哪些高大上的工作机会? 为了给大家一个学习和了解大数据的机会,我们专门邀请了拥有10年开发经验的大数据专家许伟老师,给大家进行一堂为期60分钟的公开课。 本次课程中,许伟老师将会带领大家了解Hadoop基础知识,并将真正教会大家搭建…

  • 大数据生态圈到底是一个什么概念

    大数据这个概念自身就太大并且太宽,假如一定要严厉界说是十分艰难的一件事,不过Hadoop生态圈或许由其延伸的泛生态系统,基本上都是为了处理很多数据诞生的——一般来说,这种数据依靠单机很难完结。 这个圈子里的工具,就像是我们厨房里的各种厨具——各自都有不同的用处,但也有一部分功能重合,比如盆和豌都可以用来喝汤,削皮刀和菜刀都可以用来去皮。 但是,盆用来喝汤未免奇怪,削皮刀切菜也是万万不能。即使你强行…

  • 我是怎样面试大数据岗位的?

    人住在有人间天堂之称的城市,6年多开发阅历,近来2年首要在做大数据有关的开发,近来思考换作业,根本也只思考大数据有关岗位。目前新作业现已找好,但想共享一下近来面试的失利一些阅历(成功的那些就不讲了),吐槽吐槽,跟广大吃瓜大众共享一下过程中的阅历心得,我的语文体育老师教的,还请大家莫怪。 1.公司:国内知名电信运营商,其下面的大数据研究院,面两轮 一面:技术人员面,先自我介绍,项目经验相关介绍,问比…

  • 【马哥教育早报-030期】西门子前员工敲诈公司获刑、京东物流要上天、柯洁大战阿尔法狗

    2017年5月23日 星期二 马哥教育新闻快报 导读:西门子前员工敲诈公司获刑、京东物流要上天、柯洁大战阿尔法狗 每日一句 如果你已经尽力却仍旧失败,那么你没必要为任何失败气馁;若没有,就不要找任何借口。 早报内容 1.曝乐视美国公司本周大规模裁员,从500多人裁减至60人 CNBC财经电视台援引消息人士的说法称,乐视美国正计划进行一轮裁员,员工人数将由目前的500多人裁减至60人。此次裁员最快将…

  • 大数据的科学算命

    (本文纯属虚构,如有雷同,一定统计不显著) “同学,你的背包拉链没拉好。这个社会越来越险峻,像你长得这么心爱的女孩子一定要留神。小姑娘正本左手端着星巴克的焦糖玛奇朵右手查着iPhone 7,闻言瞟了我一眼,随手摸了摸背包,当她的手指触到暴露的MacBook Air时,我趁机向她抛出一个好心而知性的微笑。她身旁的姑娘朝我投来讨厌的目光,用手拉拉她胳膊暗示她快走。小姑娘却是懂礼貌,咧嘴一笑,“谢谢大叔…

  • 大数据的核心价值到底是什么?

    先说结论:大数据的终极核心价值在于“资源优化配置”。 无论是大数据在农业的使用也罢,工业的使用也罢,抑或是在金融行业的使用也罢,终究都是经过大数据技能来获悉事情开展的本相,终究使用这个“本相”来愈加合理的配置资本。 具体来说,要实现大数据的核心价值,还需要前两个重要的步骤,第一步是通过“众包”的形式收集海量数据,第二步是通过大数据的技术途径进行“全量数据挖掘”,最后利用分析结果进行“资源优化配置”…

  • 一张图教你入门大数据

    大数据 1 概念 1.1 在时刻复杂度和能量复杂度有限的前提下,输入:大数据D,输出:问题的解f(D) 2 技术点 2.1 大数据获取 互联网 物理世界信息 2.2 大数据的传输 安全可靠传输的理论和算法 大数据传输的调度和控制 在传输的过程中继续进行计算 2.3 大数据可用性 量质融合管理 劣质容忍原理 深度演化机制 2.4 共性问题 结构化算法 非结构化算法 2.5 安全与隐私 3 可能的改革…

  • 联系我们

    400-080-6560

    在线咨询:点击这里给我发消息

    邮件:work@magedu.com

    工作时间:周一至周日,09:00-18:30

    QR code