《CSDN调查报告.docx》由会员分享，可在线阅读，更多相关《CSDN调查报告.docx（11页珍藏版）》请在第壹文秘上搜索。
1、大数据技术市场调色报告；-bigdata浪潮”迫使企业做出选择发表于2012-02-0613:2612517次阅读|来源CSdnl0条评论|作者李智数据中心浪潮数据挖掘数据分析大数据摘要：大数据时代的数据格式特性首先让我们先来r解一下大数据时代的数据格式特性。从il角度来看，信息结构类型大致经验J三次浪潮。必需留意这一点，新的浪潮并没取代旧浪潮，它们仍在不断发展，三种数据结构类型始终存在，只是其中一种结构类型往往主导于其他结构：结构化信息这种信息可以在关.依据idc的调查报告预料到2020年全球电子设备存储的数据将暴烟30倍,达到35zb（相当于10亿块Itb的硬盘的容成）。大数据浪潮的到来也
2、为企业带来了新一轮的挑战。对于TT打算的企业来说这无疑是座信息金矿，能够合理的将大数据转换为有价值信息成为将来企业的必备技能。恰逢此时，CSdn特地针对企业相关人员进行了大规模问卷调研，并在数份的调杳报告中总结出现今企业大数据业务的现状，在此我们也将调研结果展示与此以供大家参考。大数据时代的数据格式特性首先让我们先来了解一下大数据时代的数据格式特性。从il角度来看，侑息结构类型大致经验三次浪潮。必需留意这一点，新的浪潮并没取代旧浪潮，它们仍在不断发展，三种数据结构类型始终存在，只是其中一种结构类型往往主导于其他结构：结构化信息这种信息可以在关系数据库中找到，多年来始终主导者it应用。这是关键任
3、务。ItP系统业务所依匏的信息，另外，还可对结构数据库信息进行排序和查询：半结构化信息这是it的其次次浪潮，包括电了邮件，文字处理文件以与大量保存和发布在网络上的信息。半结构化信息是以内容为基础，可以用r搜寻，这也是谷歌存在的理由；非结构化信息该信息在本质形式上可认为主要是位映射数据。数据必需处r一种可感知的形式中（诸如可在音频、视频和多媒体文件中被听或被看）。很多大数据都是非结构化的，其浩大规模和困难性须要高级分析工具来创建或利用一种更易于人们感知和交互的结构。企业内部大数据处理基础设施普遍落后从调查结果可以看出，接近50%的企业服务器数盘在100台以内，而拥有100至500台占据了22%的
4、比例。500至2000台服务器则占据剩下28.4%的比例。可以看出面对大数据现今大部分企业还没有完善其硬件基础架构设施。以现阶段企业内大数据处理基础设施的情况来看50%的企业面临大数据处理的问题（中小企业在面对大数据的解决之道应遵循采集、导入/处理、查询、挖掘的流程）。而在具有大数据处理需求的企业中52.2%的日数据生成量在100gb以卜.，日数据生成成100gb到50tb占据了43.5%,而令人惊异的是，日数据生成成50tb以上也有4.集的份额。数据最持续的增长，公司将被迫增加基础设施的部署。专利费用将始终增加，而开源技术，则省了这笔始终持续的专利费。对急需变更自己传统it架构的企业而言，传
5、统的结构化数据与非结构化数据的融合，成了全部人关切的问题。企业面对大数据处理的挑战与问题从图中我们可以看出资源利用率低、扩展性差以与应用部署过于困难是现今企业数据系统架构面临的主要问题。其实大数据的基础架构首要须要考虑就是前弹性，Bfi看数据的不断增长，用户须要从硬体、软件层面思索须要怎样的架构去实现。而具备资源高利用率、高扩展性并对文件存储友好的文件系统必将是将来的发展趋势。应用部署过于困难也催生了大数据处理系统管理员这一新兴职业，其主要负货日常hadoop集群正常运行。例如干脆或间接的管理硬件，当须要添加硬件时需保证集群仍能够稳定运行.同时还要负货系统监控和配置，保证hadoop与其他系统
6、的有机结合。而多格式数据、读写速度（读写速度是指数据从端点移动到处理器和存储的速度）以与海量数据是企业面临大数据处理急需解决的技术挑战。众所周知陵若大容量数据Sb级、Pb级甚至eb级）的出现，业务数据对it系统带来了更大的挑战，数据的存储和平安以与在将来访问和运用这些数据已成犯难点。同时大数据不只是关于数据量而已。大数据包括了越来越多不同格式的数据，这些不同格式的数据也须要不同的处理方法。充分利用有用的数据，废弃虚伪无用的数据，是数据挖掘技术的最重要的应用。企业内部数据分析与挖掘工具应用现状云时代企业数据挖掘面临如下三点挑战。挖掘效率：进入云计算时代后，bi的思路发生了转换.以前是基于封闭的企
7、业数据进行挖掘,而面对引入互联网应用后海鼠的异构数据时，目前并行挖掘算法的效率很低：多源数据：引入云计算后，企业数据的位置彳1可能在供应公彳云服务的平台上，也可能在企业自建的私有云上，如何面对不同的数据源进行挖掘也是一个挑战；异构数据：Web数据的最大特点就是半结构化，如文档、报表、网页、声音、图像、视频等，而云计算带来了大量的基互联网模式供应的SaaS应用，如何梳理有效数据是一个挑战。篇二：2013中国程序员薪水调查报告摘要：2014年1月，CSdn携手程序员杂志发起了“2013年中国软件开发者薪资大调查”活动。通过对洞套问卷数据进行整理分析形成的调查报告，为我们了解国内软件开发者待遇水平、
8、生存状态以与行业现状供应了支撑。2014年1月，CSdn携手6程序员杂志发起了“2013年中国软件开发者薪资大调查”活动。本次调查活动如既往地得到了国内近万名开发者踊跃支持，通过对这些问卷数据进行整理分析形成的调查报告，为我们了解国内软件开发者待遇水平、生存状态以与行业现状供应了支撑.参与本次调杳的开发者遍布软件开发领域各条战线，其中来自软件工程师岗位的参与者占63.2战，高级软件工程师占15.42%,技术支持/维护工程师与高级软件架构师的比例同为1.95%o在已经走上管理岗位的开发者中，clo/ci。/技术总监占1.29%,经理/主管级别的开发者占10.35%。（2013年中国软件开发者薪资
9、调查报告数据显示：？2013年中国软件开发者薪资用幅放缓，月薪5000元以上人数占比同比增长3.89%（2012年为10.8%）：在参训开发者中，薪资在万元以上的高收入人群占比为20.66%,月薪在500010000元的中高收入者占比最多，约为45.23%：北上广深依旧是软件开发者主要聚集地，相比2012年,参与调查的成都软件开发者比例超过杭州进入前五；高收入开发者占比最大的前3行业：嬉戏、互联网、金融；圾赚钱的五种编程语满:python,objective_c-c+、cjavascript；有32.98舟的开发者过去一年曾跳槽，45.12%的开发者在新一年有跳槽安排：开发者跳槽三大缘由：薪水
10、低、福利少、公司技术水平差：开发者跳槽三大途径：聘请网站、挚友介绍、聘请会。?注：1.以上数据所涉细分类别有效样本量皆2100人。2.在本次薪资调查报告中，我们将开发者的月收入分为低收入（3000元以下）、中等收入（30005000元）、中高收入（500（TloOoO元）与高收入（大于100oo元）四个等级。城市本次调杳活动参与者来自全国各地，北上广深依旧是软件开发者主要聚集地，调查活动参与者占比较高的城市依次为北京（23.38%）、上海（12.67%）X深圳（11.17%）和广州（6.48%）。相比2012年，参调的成都软件开发者比例超过杭州进入前五，为5.11圾近几年，成都il产业发展快速
11、，除国内外知名大型科技公司争相在成都设立研发中心外，也出现了不少在各领域内小有成果的创业公司。缘由有多方面，除了当地政府的政策扶持外，北上广地区公司运营成本上升促使创业公司向二三线城市转移也是一方面因素。与2012年相比，各城市高收入人群比例居前五位的变更较大，2013年分别为西安(26.52%)、青岛(25%)、天津(23.26%)、上海(22.24%)与苏州(22.22%).而2012年薪资调查报告中位居前五的北京、广州、深圳与杭州这几个城市,2013年高收入人群占比分别为20.22%、19.9%、21.37%和21.03%。不同城市开发者收入范围分布西安、吉岛、天津与苏州等城市的“逆袭”
12、可以说是意外也可以说是情理之中。近年来，全国各地在建设区域性高新园区方面不遗余力，部分地区也交出了不错的成果单。以西安高新区为例，2013年，西安高新区软件和信息服务业产值达到了1043.7亿元，同比增长32.4%。可以从两方面解读这一信息背后的因素：一方面，当地为了进一步提高园区影响力，会在人才引进上供应具备竞争力的政策：另一方面，对于开发者来说，当二三级家乡城市的it产业中出现具有吸引力的发展空间时，选择回流也合情合理，这部分开发者回流后，或得益于地方政策，他们的薪资水平自然也具备竞争力。行业虽然说“三百六十行，行行出状元”，但不同行业中同岗位工作人员的薪资水平依旧有所差别，软件开发者也不
13、例外。所以开发者选择什么行业去发展，对自身收入影响特别大.在本次参与调杳的开发者中，来自独立软件开发商、互联网和制造(通信/电子设备)这三个行业的开发者所占比例居前三位，分别占28.03M13.68$、11.36%,合计占到了53.07%,不同行业开发者收入范阐分布从行业收入来看，高收入参调开发者占比较高的分别是嬉戏、互联网和金融，占本行业全部参训者比例分别为33.19%、32.69%、26.34%与2012年相比，嬉戏行业表现突出，高收入开发者在业内占比超过互联网成为第,同比增长5.7%。2012年位列第三的国防/军队行业2013年则由金融行业替代，这也与2013年互联网金融在业界影响力的提
14、升相得益彰。与高收入相对应的则是低收入，低收入开发者占比较高的行业主要集中在零倍/物流、政府与制造(非电子设备)等行业，占比依次为16.88$、12.7%与11.76%,这方面的数据与2012年数据相比变更不大。数据显示，企业规模与软件开发者的收入呈正相关，企业规模越大，员工收入越高。在研发人员超过I(X)O人的公司，高收入软件开发者占34.66%,而在规模为500999人、300499人的公司中,高收入软件开发者分别占24.62%、20.41%o对于去外企还是国企，假如仪从薪资角度看，本次调查也能给出肯定参考。调查显示，外企薪资普遍需于民企和国企。在外企中，收入超过1万元的高收入人群占比达到
15、40.66%,而在私企和国企中仅为18.77%、16.02讥技术编程语言与软件开发者的关系是什么？谁成就了谁？这样的问题无法给出明确的回答。门好的编程语言的确能耕助开发者更好地完成工作，而得到众多开发者支持的编程语言则能不断完善成为更好的技术工具。在“你主要运用的编程语言”调查项中，ja，a成为最大赢家，其背后的开发者占高达45.39%,相比2012年同比增长6.39%,与2011年持平。而1、c+紧随其后成为开发者最常用的编程语言，开发者占比为17.63%与13.37%。开发者主要运用的编程语言各编程语言开发者收入范围分布拥电最多的编程语言是不是最值得我们去学习？也不肯定，通过交叉对比分析，
16、我们发觉最赚钱的编程语言并不是粉丝最多的java,而是去年位居第三的PythOn。python、objective-csc与C这四种编程语言中，高收入开发者占比均超过20%,依次为46.5眠、篇三：CSdn2012软件行业薪酬调查二10作者：baiyuzhong分类：每日关注，热点报道阅读：59,344次添加评论记者/魏兵2012年末，csdn和程序员杂志发起了一年一度的“软件开发者薪资大调杳”。本次调杳收到了上万份问卷，开发者的参与主动性超过以往。通过分析这些数据，我们得以对目前软件开发者的生存状态、待遇水平、行业状况等有了更清晰的解。本次参与调查的开发者中，约59.货的开发者在公司中的职位是软件工程师，高级软件工程师占14.98%。任职管理岗位的开发者中
