坂田做网站多少钱,贵阳专业做网站的公司有哪些,济南竞价托管公司,网站建设企业官网源码作者 | 衣公子来源 | 衣公子的剑#xff08;ID#xff1a;yigongzidejian#xff09;前言2000年#xff0c;微软如日中天。有人问比尔盖茨#xff08;Bill Gates#xff09;对于IT行业的看法。盖茨说#xff0c;挺好的#xff0c;就是有点noise。 noise#xff0c;本意… 作者 | 衣公子来源 | 衣公子的剑IDyigongzidejian前言2000年微软如日中天。有人问比尔盖茨Bill Gates对于IT行业的看法。 盖茨说挺好的就是有点noise。 noise本意是噪音。但是五个字母又分别指代五家公司Netscape , Oracle , IBM , Sun , EMC 。 这一语双关可谓骚出了天际。今天的第一杯就为这个故事干一个吧。 不过和盖茨的很多传奇故事一样这个传闻目前只流传于中文世界。盖茨到底有没有说过那么嚣张又霸气的话暂时无处考证。 传言如此深入人心有一个重要的原因。这一问一答准确又形象地概括了一个旧时代以微软为绝对统帅加上 NOISE 这5家软件公司IT企业卖软件一手交钱一手交货。 科技圈的天变得比臭男人的心还快。以 Google 为代表的新贵举着“免费“的旗号已经打到了家门口。搜索既然不收费那 Google 怎么赚钱呢 常言道天下没有免费的下午茶。当你用的产品不要钱那么很可能作为用户的你就是产品本身。 Google聚拢用户再打包卖给广告商的商业模式被杰弗里·哈默巴赫尔( Jeffrey Hammerbacher ) 形象地批评为我们这一代最聪明的头脑都在思考如何让人们点击广告。 “哇原来你不过只是一家广告公司”同业的戏谑让Google羞红了脸说起了类似”你怎么这样凭空污人清白……窃书不能算偷……窃书……读书人的事能算偷么“之类的话。 科技圈充满了快活的空气。 为了捍卫自己科技公司的质感Google连发三篇论文。围绕一个主题怎么处理数据。 随着上网人数和信息量的爆炸Internet的海洋越来越宽广Google每天收到30亿条搜索指令。仅仅1天处理的数据量就是美国国家图书馆所有纸质出版物的上千倍。可是尽管如此每当我们按下回车键搜索结果却能即时地展现出来。这背后有什么魔法 Google的三篇论文篇篇佶屈聱牙又字字力透纸背分别介绍了三个技术:Google File System, MapReduce, BigTable。千言万语汇成一句话用分布式的体系搭建一套数据存储、分析的系统。 希腊神话里普罗米修斯将火种带给人类。火极大地提高了人的生产力。希腊人惜墨没介绍普罗米修斯的长相。 现实里Google的程序员就像普罗米修斯那三篇介绍怎么突破数据处理能力的文章被后人誉为“三驾马车“拉着人类进入了——大数据时代。细谈不用专业词汇吓跑你我们边喝边聊把技术说的简单点。传统技术是集中式单点架构。打个比方你有一个助理小明什么事都集中交给他。忙的时候小明天天睡公司闲的时候上班玩手机。 Google“三驾马车”提出分布式架构。还是那个比方你的事业越做越大如今小明就算一天工作24个小时也完成不了。于是就分布式地招3个助理小A小B小C各司其职。 原理是简单的而现实极复杂尤其考虑到现实互联网面临大规模、高并发、实时在线等新的需求。 信息怎么分发给ABC以什么标准这可不能乱分回头自己都忘了“帮我在四季开个房“是交给了小B办还是小C。如果问错了人不仅效率慢关键会搞得人尽皆知。还有啊进一步延伸以什么标准招聘ABC哪些招名校哪些招实干派是不是必须能喝酒上班的裙子可以接受多短物尽其用不可造次。 所以每有技术变革第一件事一定是路线之争、行业标准之争。 DougCutting是个编程天才从Google亦步亦趋的追随者终于成长为了备受重视的对手。Google做搜索Cutting跟着开发了Lucene/Nutch搜索。Google的三驾马车提出以MapReduce算法应对海量数据Cutting就写出了Hadoop。 Hadoop降生那一天Cutting是雅虎的雇员背景是Google、微软、雅虎的搜索引擎大战硝烟弥漫。Google的“三驾马车“破解了海量数据的难题保证了Google搜索成为技术上的第一高峰。同样Cutting和Hadoop算是为雅虎的搜索业务鞠躬尽瘁死而后已。 几年后马云要处理和雅虎的分分合合。有些地方扭捏有些地方为难。但是对于雅虎搜索还是相当“馋她的身子的“。简单的说淘宝终于做起来了需要一款优质的搜索引擎服务用户搜索商品。更深一点地说这场交易涉及所有互联网企业的一个深沉幽叹哎这该死的磨人的温柔的小妖精——数据。 冥冥之中都是天意。暂且按下不表。 且说Hadoop一降生一群科技巨头就聚到旗下抱团。原因很简单Google这厮在数据处理技术上已经领先得太多各位诸侯必须群策群力把开源的Hadoop发展好。来它个十八路诸侯讨董卓。 科技圈是有爱恨情仇的。开源的Linux挑战微软闭环的Windows/Office。开源的Android围攻苹果闭环的iOS/iPhone。Google的三驾马车对面以Hadoop为旗号聚拢起雅虎Yahoo、亚马逊Amazon、IBM、Facebook、阿里巴巴、华为…… 哪有什么新的东西都是历史的重复。进阶光看这些眼花缭乱的专业词汇就能明白大数据这玩意技术门槛不低。但是每个市场参与者都想积累数据了解数据挖掘数据把自己在商业搏杀中的赢面提高哪怕一点点。于是市场分工发挥了作用专门有些公司我来买服务器我来搭架构你需要存储和处理数据好我卖个服务给你。 铛铛铛铛——一个新的行业云计算——诞生了。2006年互联网时代才刚刚开始万物没有名字提到的时候尚需用手指指点点。江湖里的机会遍地都是游戏、视频、O2O软件、媒体、金融、垂直电商…… 混沌之中亚马逊是对于大数据/云计算拥抱最坚决的一位。 收集数据→处理数据→分析数据→向用户推荐商品这套模式让电商巨头亚马逊尝到甜头。当时亚马逊网站上已经有第三方店家亚马逊的初衷是让这群第三方商家也享受到数字化福利。这项被命名为AWSAmazon Web Services的服务就是云计算行业的滥觞。 贝佐斯Jeff Bezos少年谢顶索性剃了光头。此生要做硬汉打天下的时候和几个手下说过这样一句话表面上我像一只鸡那么胆小但是内心却很强大。 二十年里亚马逊电商越做越大。但是一直不赚钱收入飞到了太空但是利润始终在地上爬。钱去哪了被贝佐斯砸向了研发砸向了未来。 利润不增长股价就逡巡不前华尔街总是不惮以最坏的恶意数落贝佐斯。直到2018年AWS业务的利润爆发。亚马逊的股价终于水涨船高不但坐稳了云计算市场当之无愧的老大贝佐斯也接过了比尔盖茨世界首富的位子。数据真好2008年7月北京奥运会马上就要开幕。一则新闻登上中国各大媒体的版面。比尔·盖茨为了看北京奥运会在距离水立方不到180米的盘古大观租下一个700平米的四合院花费1个亿。 事情传到了比尔·盖茨耳朵里盖茨回了两个字假的。 能用这种新闻卖房子也足见这个楼盘的老板真是野路子。果然2017年他就把自己的名字彻底混成了闵敢的词语非常闵敢的那种。 至今还有很多人相信这个假新闻。 我身边的朋友都知道借助最近美股的走势衣公子凭借冷静的操作把自己和贝佐斯、比尔·盖茨等人的财富差距缩小了几十亿美元。这给我极大的信心。于是斗胆计算了一下新闻里的数据四合院面积700平米租金每年1个亿那就是平均14万/平米。可是这个楼盘当时的售价明明才5万啊......数据真好。可惜我们这群傻→B在“小数据”的年代都那么好骗又要怎么在“大数据”时代苟活 盖茨花1亿租四合院的假新闻满天飞的同一时间杭州城西的阿里巴巴遇到了麻烦。 简单点说随着业务的扩张阿里巴巴对于数据的处理能力已经到达极限。 如果说大数据是新时代那么在“旧社会”人类是怎么处理数据的呢可以用一个单词概括IOE —— IBM的服务器Oracle的数据库EMC的存储。I、O、E在各自的领域都强得无法替代。事实证明好的东西就只有一个缺点——贵。 “去IOE”很早就成为企业的心声。出于经济成本和“支持国产”的考虑外加正赶上一次技术迭代Linux的X86服务器挑战传统的Unix小型机服务器中国企业开始了“去IOE”的征程。 简单来说这次“去IOE”失败了。大家很快发现自己离不开IOE。总体上无非是边边角角砍砍成本放得开的也不过是买买联想的PC买买华为或者浪潮的服务器。归根到底市场并没有一个可以替换IOE的好方案。 不是说了吗好的东西就只有一个缺点——贵。相较之下数据的准确、时效可开不得玩笑。尤其是金融企业。想象一下当你的衣公子卑微地用六位数的密码打开自己四位数的账户但是ATM机上取了钱卡里的余额却没有即时地减少……这种画面你敢想 所以搁到今天还是让我觉得神奇去IOE这件事最终竟然是让阿里巴巴这厮扛了大旗。 淘宝算力的制约怎么突破的阿里选的路线是去IOE做阿里云。 步骤大约为曾经完全依赖Oracle→采用Hadoop集群→建成单个机群节点数最多的Hadoop机群→用自主研发的飞天平台上的ODPSOpen Data Processing Service开放数据处理服务。阿里云历经千帆绝处逢生的故事大家已经听过很多遍。 不过我倒认为没必要太渲染阿里云的苦情。的确飞天和ODPS都是自研但是亚马逊和微软拥抱开源也很成功不是吗 另一方面恰恰是因为固守自研在很长一段时间项目上一批又一批的程序员不堪重负人才纷纷出走。另外自研技术对内是有优势但是对外呢会不会构成一种推广障碍比如潜在客户考虑采购阿里云的服务但是IT部门一想到还要特意学一套系统于是嘴上说不要身体竟然也不要。 不过得失自在人心宝剑留在江湖。这也是本文最终要引向的那个价值相信竞争让市场说话。 无论如何阿里云的诞生为看似热闹实则沉闷的中国科技界带来很多新的东西。去 IOE一般认为阿里是在2012年底初步完成了去IOE。 四年前阿里云的计划刚刚破土那是2008年大学毕业生如果可以拿到甲骨文Oracle的offer谁会去土气横秋的BAT 可是历史不就是这样吗——一些不甘现状的人奋力吹响号角奏响的正是此时此刻自鸣得意的另一群人最后的挽歌。 阿里当时是 Oracle 在亚太地区最大的客户拥有20个节点比亚马逊美国的17个节点还要多。想来多少也有点唏嘘你最深爱的两位客户竟然先后杀入你所在的行业。Oracle倒下的经典瞬间是去年中国研发中心的关闭和裁员昔日令人欣羡的高级白领如今举着中英文夹杂的横幅站在北京城的烈烈风中。 当中很多人十年之前明明比入职BAT的同学更优秀。像极了那首诗。 少年听雨歌楼上红烛昏罗帐。壮年听雨客舟中江阔云低断雁叫西风。Larry Ellison是当之无愧的硅谷传奇32岁创立Oracle数据库领域的国王一当就是30年。2012年接受采访聊到云计算Larry Ellison嗤之以鼻举手投足间都是对贝佐斯的鄙夷 料定AWS没前途自己一口口水就能淹了它。2015年Oracle终于砸钱猛做云计算了。 你看啊国王的手里还握着剑但是江山哪里还是十年前的样子。IOE里的IBM也好不到拿去PC业务卖给了联想扬言专注企业服务光荣地创下了连续22个季度营收同比下滑的尴尬记录。22个季度这个数字不准确噢别怪我我只关注到第22个月后来谁还跟IBM啊。 停住。衣公子说这些真不是为了落井下石。时代一直都是这样舞台中央的角儿你方唱罢我登场人来人往。但是能让技术走出聚光灯之外在普通百姓、普通商业主体身上开花结果才是善莫大焉。Larry Ellison是NBA球队金州勇士Warriors的死忠主场比赛几乎场场出席。甲骨文Oracle不仅冠名了勇士队的球场而且几乎每年都传出即将全资收购球队的消息。不过在长达40多年的时间里勇士队乏善可陈甚至常常联盟垫底是NBA可有可无的背景板。 好在勇士在硅谷。 硅谷对于数据挖掘的痴迷造福了勇士。NBA崇尚明星的突破和扣篮但是数据永远理性大数据显示三分球才是更有效率更合算的赢比赛手段。身体瘦弱专攻三分球的后卫库里Stephen Curry远不是理想的NBA明星却在勇士得到重用围绕他打造的“死亡5小”组合常规赛73胜破了乔丹尘封20年的单季常规赛最佳记录随后连续5年杀进总决赛拿下3个总冠军。 和每个商业王国一样勇士王朝最终还是解体了后三年最重要的冠军拼图杜兰特Kevin Durant因为在勇士队遭遇内讧被排挤去了布鲁克林篮网队。屈辱和荣耀归属和背叛兄弟和仇人所有人都等着他杀回甲骨文球场的那一天 哦对了篮网的老板是阿里巴巴二号人物蔡崇信。奇怪这该死的圈子怎么那么小 预言家2009年甲型H1N1流感肆虐美国。 就在疫情爆发几周前。Google的工程师在《自然》杂志上发了一篇论文。中心思想是Google用大数据技术分析用户的搜索指令提前预判到了这场流感。 这先知般的存在让Google风光得一塌糊涂。 如果你还记得不久前Google刚刚推出了Android系统。它要领导人类从PC向移动手机迁徙了那真是Google把微软按在地上摩擦的时光几乎每一场发布会都是在抽微软的脸。Google很早就野心勃勃地在Kirkland开了办公室这个距离微软总部Redmond不到10公里的地方。伴随Google疯狂的挖角辞职信一封封地递进微软CEO史蒂夫·鲍尔默SteveBallmer的办公桌。这位一米九几的大汉终于忍不住了问道“别TM告诉我你TM也是去Google”美国人比较直就回答“是啊你怎么知道的哈” Ballmer抄起椅子直接砸了过来。 那是2004年Ballmer还可以发脾气扔椅子。09年就别扔椅子了大家都觉得是微软玩了这些人的青春微软应该羞羞地向员工说声抱歉。 舍恩伯格Viktor Mayer Schnberger在《大数据时代》中指出。什么是大数据时代数据分析从“随机采样”、“精确求解”和“强调因果”的传统模式演变为“全体数据”、“近似求解”和“只看关联不问因果”的新模式。 超市零售巨头Target曾经是“小数据”时代的赢家。经过几轮实验发现把啤酒放在尿不湿旁边啤酒销量会大增。Target百思不得其解后来这样解释大概是妈妈叫爸爸去超市买尿不湿百无聊赖的爸爸看到啤酒想到也要犒劳一下自己所以就顺手买了。 在大数据时代以上至少两点可以提高。第一既然经过有限几轮实验就能发现“啤酒尿不湿”促销法那么用数字化方式无数次实验所有可能的组合搭配会发现多少种促销大法呢显然零售的效率要爆炸了。第二找到“把啤酒放到尿不湿旁边”的促销方法就行何必一定要找一个蹩脚的理由这就好比已经汗涔涔地倒下却傻乎乎地问“我和你前X友们比谁更棒”这既找不到真实的答案也无助于业务能力的提高。 不追求精确度不追求因果承认混杂探索相关——这就是大数据时代。阿里巴巴前副总裁车品觉打过一个超赞的比喻先开枪后瞄准。 当然大数据也好云计算也好并不是一帆风顺的。2009年大出风头后预测流感走势的Google Flu在2015年彻底关闭。原因第一是隐私担忧第二是多次不准荒谬频出尤其是2012年那一次反复预警有疫情但是最后毛都没有。 云计算同样挫折不断。2015年5月网商银行开业获批当日支付宝在全国范围瘫痪2.5个小时。2019年中国第一的阿里云和世界第一的AWS先后发生大规模宕机和瘫痪。作为云计算客户的你业务完全瘫痪投诉电话被打爆但是你的工程师却摸不到出问题的服务器你说你慌不慌 但是再多的问题也没有人会怀疑云计算的路子是对的。 100年前的北大。27岁胡适被蔡元培聘请为讲师教授。北大学子有质疑权威的传统准备课堂发难提几个胡适答不上来的问题让这个年轻人知道知道“this is 北大”。 傅斯年被派去提前听胡适的课探探虚实。傅斯年回来后对准备捣乱的北大同学说“这个人书读得不多但是路子是对的。你们不要闹。” 路子是对的。大数据只是还需要一些时间。除了技术的迭代就是数据的积累。 不巧的是这恰恰成为大数据最令人警惕的视角。当数据成为新时代的石油谁霸占数据谁就抢占未来。这下硅谷迎来了最严厉的拷打。《纽约客》说这还不到两年情况就发生翻转硅谷曾经被认为是美国独创性的先锋和我们时代的宇航员如今沦为与标准石油公司和其他镀金时代的垄断者进行的比较。 打倒美国垄断资本家欧盟重拳出击出台《通用数据保护条例》GeneralDataProtection Regulation为互联网企业攫取数据设置了最严格的控制。把公民隐私坚定地放在了公司发展之前。 同样的问题公民隐私和商业进步中国要怎么选作为行业领袖李彦宏的在访谈中这样说中国人对隐私不敏感。 百度大概也习惯了自己被喷成筛子的状态。舆论恨啊你李彦宏好歹是北大的怎么连“不在乎”和“没得选”都分不清还是故意分不清 换位思考一下李彦宏也不容易偏偏活在一个国人对于北大精英还抱有不切实际幻想的年代。何必呢你们自己也不去未名湖畔走走胡适傅斯年尚在乎 也不想想当年杭州师范毕业生是怎么说的“支付宝随时可以交给国家。” 这境界。还会有人舍得批评Jack 数据来说话直接上数据你们自己感受云计算的市场布局吧。Canalys的报告2019年世界范围内云计算产业的市场份额AWS占32.3%独自构成遥遥领先的第一梯队排在其后的是微软Azure16.9%、谷歌云5.8%、阿里云4.9%。 客观地说中国商业的数字化已经落后欧美不少。根据《2018~2019年中国公有云市场现状与发展趋势研究报告》、《2018中国企业上云报告》等文件美国企业的上云率高达80%而中国仅30%。 往积极地说中国市场商业数字化的前景十分广阔。知识青年上山下乡广阔天地大有作为。 但是从数据大国转变为数据强国远非那么简单。 尤其当衣公子看到很多讲解大数据的文章常常把数据多少当作大数据行业的唯一标准——这样的论述过于片面。更有甚“只要XXX中国就一定能XXX”妄图用激越的民族情绪代替理性的商业常识这样的趋势常常让我感到担忧。 请允许我铺开大数据行业的工程图。 数据采集和传输Sqoop、Flume、Kafka等开源技术存储HDFS是大数据磁盘存储的实际标准数据库Redis、HBase、Cassandra、MongoDB、Neo4j计算处理引擎Spark、MapReduce、Flink实时计算Flink、SparkStreaming数据查询和分析工具丰富的SQL on Hadoop的解决方案比如Hive、HAWQ、Impala、Presto、Spark SQL以及传统对的MPP大规模并行处理数据可视化Tableau、QlikView等敏捷商业智能分析工具等等。以上这些才是大数据。 如果把大数据技术比喻成武器。那么数据只不过是火药。千年前火药就存在数量再多也只不过是祭祀封建的鞭炮如今决定火药能否成为威力巨大的子弹最关键的是造枪的技术。 衣公子认为要带领中国走向大数据时代要反对的是拔苗助长该警惕的是“管得太多”要相信的是敬畏市场能依赖的是企业家精神。 这个问题上不存在特殊国情。互联网行业没有国家模式早有前车之鉴。看过那个纪录片吗马云在北京推销中国黄页在宣传司综合处对方打断了他“我跟你讲啊这件事情你应该先约办事程序应该你先约你要不约的话呢很难给你做一个很满意的回答。”…… QQ最初不赚钱却狂吃服务器腾讯一度濒临破产。抱上中国移动的大腿合作移动QQ才赚上了增值业务的分账马化腾以为迎来了柳暗花明。但是移动推出了自己的产品“飞信”又把企鹅踹开了。中国移动不强乎当年企鹅的营收和利润给它当零头都不配不是吗 当搜索行业已经明朗还是有人想培养一种更正能量的搜索引擎——即刻。股东名单强到我都不敢在文章里列名字还请了一个乒乓球大满贯冠军来当总经理。可是如今飞信安在哉即刻搜索安在哉 真的为了中国好一定要允许、鼓励自由竞争。 其实管理者如果真的想帮忙大概有以下三点是可以做的。第一培养人才。根据各类报告以及衣公子和从业者的交流中国大数据行业的人才缺口目前约100万5年后将达到500万。 第二保护知识产权维护市场公平。市场与人性如此我们不要自欺欺人。刹住蔓延中国的商业抄袭之风让每个企业无论大小都可以收获自己的商业果实。这样才能真的做到万众创新让待攻克的技术难题陷入人民战争的汪洋大海。 第三开放数据。目前来看几乎所有的公共数据都在政府和BAT手中。既然数据就是价值开放价值就好比战国时期燕昭王于易水之畔筑黄金台招天下之士谁是英雄现场抽一块黄金与之。 其实美国也有振兴大数据行业的政策而且比我们更早但不是补贴钱而是开放政府掌握的数据。奥巴马2009年1月签署《开放和透明的政府指令》Transparency and Open Government丰富且大量的美国公共数据是美国大数据行业兴盛的土壤。 奥巴马开篇就引用美国大法官路易斯·布兰代斯的名言阳光是最好的防腐剂。 是啊阳光是最好的防腐剂。形势比人强。 不说了喝酒。作者简介衣公子微信公众号衣公子的剑IDyigongzidejian做爱读的商业评论。推荐阅读
如何成为一名黑客一篇与众不同的 String、StringBuilder 和 StringBuffer 详解干货 | 大白话彻底搞懂 HBase RowKey 详细设计发送0.55 ETH花费近260万美元这笔神秘交易引发大猜想Python 爬取周杰伦《Mojito》MV 弹幕这个评论亮了谷歌 Chrome 将弃用“黑名单”“Master/Slave”主从模式也要换名京东姚霆推理能力正是多模态技术未来亟需突破的瓶颈真香朕在看了
