计算所正在开发的面向数据中心的16节点验证性原型系统:@侯锐_计算所 小组的基于PCIe定制通信协议(蓝色光纤与板卡),@中科院_陈明宇 小组的基于消息机制的DRAM/NVM一体化存储系统(大板卡),@付斌章 小组的SDN交换机;所有节点运行@Dolphin_daddy 詹剑锋小组开发的新型OS,还有崔慧敏小组的支持GPU的Hadoop + 展开全文 【机器学习该怎么入门？】熟悉 Python/C++/R/Java；理解统计的一些概率的理论，比如贝叶斯，SVM等；了解一些算法的本质，SVM是个很好的下手点；熟悉分布计算，请熟悉Hadoop ；熟悉Unix的Tool以及命令...🔗 网页链接 [呵呵]脑子充满了 hadoop hbase java c++ datastructure sicily database 无关勿扰[呵呵] 【用python + hadoop 编写分布式程序（一）：原理介绍】 Google为自己的业务需要提出了编程模型MapReduce和分布式文件系统Google File System，并发布了相关论文。 在开发搜索引擎Nutch时对这两篇论文做了自己的实现，即同名的MapReduce和HDFS，合起来就是Hadoop 🔗 网页链接 展开全文 Krec 氪记：20141017 早报 | 苹果发布四款新硬件、Yosemite 正式版、iOS 8.1 和 iCloud 云端相册公众测试版，Exchange 多项安全性更新， 微软合并IT 从业者会议至 Microsoft Ignite 新品牌，OpenStack 新版支持 Hadoop 大数据应用，及其它。🔗 网页链接 展开全文 【HDFS 进化，Hadoop 即将拥抱对象存储？】Hortonworks在博客中提出了一个全新的Hadoop 对象存储环境Ozone，能将HDFS从文件系统扩展成更加复杂的企业级存储层。 Hadoop 社区的一些成员今日提议为Hadoop 增加一个新的对...全文链接→🔗 网页链接 在2014年12月12-14日北京召开的2014中国大数据技术大会（暨第二届CCF大数据学术会议）上正在邀请Hadoop 之父Doug Cutting，希望能有机会带大家领略知名Hadoop 公司Cloudera的最佳实践。 『【BDTC讲师】Hadoop 之父Doug Cutting：Lucene到Hadoop 的开源之路』🔗 网页链接 展开全文 【超越 Hadoop ，Luigi 打通云端大数据管道】Liugi数据管线的可视化管理图 新的大数据开源技术和工具往往来自互联网公司，除了Facebook、Google和Twitter这样的巨头外，一些甚至是你想不到的互联网公司，例如Netflix和...全文链接→🔗 网页链接 【Apache Tez是什么? 】你可能听说过Apache Tez，它是一个针对Hadoop 数据处理应用程序的新分布式执行框架。但是它到底是什么呢？它的工作原理是什么？哪些人应该使用它，为什么？如果你有这些疑问...全文链接→🔗 网页链接 【Hadoop 五大误区 反思部署的普遍误区】ApacheHadoop 助力企业应对他们最艰难的挑战之一利用海量数据创造价值。用户普遍部署Hadoop 框架，是因为它能够帮助企业从各种不同类型的大数据中获得价值。独立分析机构Forr...全文链接→🔗 网页链接 两本代码多适合边看边练的书(都有pdf):《Mining the Social Web》第2版、《Agile Data Science》。都是O'REILLY 2013年新书,都是Python,前者偏向网站API(Twitter、FB、LinkedIn、GitHub、Google+),后者偏向大数据(Hadoop 、D3、Pig)。一个人自学很累,建议2~3人组队看书 展开全文 【Hadoop 遭遇瓶颈的七大危险信号】大多数企业大数据应用案例尚处于实验和试点阶段，对于少数首次在生产环境部署Hadoop 系统的用户来说，最常遇到的就是扩展问题，此类问题往往导致企业因噎废食，终止大数据应...全文链接→🔗 网页链接 MapR试图将SQL-on-Hadoop 推向新水平【MapR试图将SQL-on-Hadoop 推向新水平】MapR今天更新了其Hadoop 发行版，新增了Apache Drill 0.5，以减少繁重的数据工程工作。 Drill是开源分布式ANSI查询引擎，主要用于自助服务数据分析。这是谷歌的Dremel系统的...全文链接→🔗 网页链接 展开全文 【MapR试图将SQL-on-Hadoop 推向新水平】MapR今天更新了其Hadoop 发行版，新增了Apache Drill 0.5，以减少繁重的数据工程工作。 Drill是开源分布式ANSI查询引擎，主要用于自助服务数据分析。这是谷歌的Dremel系统的...全文链接→🔗 网页链接 Google后Hadoop 时代的新“三驾马车”——Caffeine、Pregel、Dremel 🔗 网页链接 公开课报名→🔗 网页链接 转发本围脖还能赢《敏捷数据科学:用Hadoop 创建数据分析应用》图书！将抽取十位幸运粉丝！ 【在Apache Hadoop 中使用Rhino项目进行数据加密】 Cloudera 最近发布了一条关于 Rhino项目 和 Apache Hadoop 中静态数据（data at-rest）加密的 新闻 。Rhino项目是由Cloudera、Intel和Hadoop 社区合力打...全文链接→🔗 网页链接 展开全文 【暴君石虎】后赵武帝石虎登基前就杀了3任妻子。一次征美女3万，仅345年杀不情愿者3千余人。动用劳力40万在各地建宫殿，苛捐杂税多到卖儿卖女仍凑不够，百姓只好全家自缢，路边树上挂满尸体。长子石宣密谋篡位，事败后石虎将其拔掉头发、舌头，砍断手脚，剜去眼睛活活烧死，所有妻妾儿女全都处斩。 展开全文 【#SAE技术分享# 】《分布式文件系统-HDFS》Hadoop 的核心就是HDFS与MapReduce。那么HDFS又是基于GFS的设计理念搞出来的。HDFS全称是Hadoop Distributed System。HDFS是为以流的方式存取大文件而设计的。适用于几百MB，GB以及TB，并写一次读多次的场合。🔗 网页链接 展开全文 初创企业最热衷的技术分别为：编程语言：JavaScript/Node.js；前端技术：Ruby on Rails；存储技术：MySQL、MongoDB；移动技术：iOS；基础设施：AWS；DevOps： Chef；搜索技术：Elastic search；API集成：Facebook API；先进技术：大数据；大数据软件：Hadoop 。 展开全文 初创企业都使用什么技术？ | AngelList的一份自我报告将若干初创企业分成了好中差三档，然后调查各自使用的编程语言、前端技术、存储技术、DevOps工具、搜索技术等，发现了这些初创企业的技术使用偏好。其共同点是，远离闭源技术。🔗 网页链接 by @boxi 【#SAE技术分享# 】《6个用于大数据处理分析的最好工具》大数据分析，研究大量的数据的过程中寻找模式、相关性和其他有用的信息，可以帮助企业更好地适应变化，并做出更明智的决策。介绍几个工具：1、Hadoop ；2、HPCC；3、Storm；4、Apache Drill；5、RapidMiner；6、Pentaho BI。🔗 网页链接 展开全文 【官方正式发布 Apache Hadoop 2.5.0 版本】 尽管下载文件在前几天已经发布，不过官网上今天才发布了 Apache Hadoop 2.5.0 正式版，这是一个小更新版本，包括一些主要新特性和改进以及 Bug 修复，...全文链接→🔗 网页链接 【Hadoop 2.5.0 发布】 今天突然看到了hadoop 2.5.0 出来了，好快呀 ，主页还没有更新，估计是修改了一下bug. 下载地址： 🔗 网页链接 本文...全文链接→🔗 网页链接 【Hadoop 的辉煌还能延续多久】Hadoop 技术已经无处不在。不管是好是坏，Hadoop 已经成为大数据的代名词。短短几年间，Hadoop 从一种边缘技术成为事实上的标准。看来，不仅现在Hadoop 是企业大数据的标准，而且在未来，它的地位似乎一时难以动摇。 🔗 网页链接 【数据科学家调查:受挫数据多样性，吐槽Hadoop 】 经过无数权威媒体的反复轰炸，我们大致已经相信， 数据科学家 是21世纪最神秘最性感最多金的职业，他们是大数据时代数据炸弹的拆弹专家，企业数字化经...全文链接→🔗 网页链接 【Guagua：PayPal的Hadoop 迭代式计算框架】 如何利用大数据训练风险控制的数学模型一直以来都是PayPal在欺诈交易检测的挑战。PayPal在风险控制模型训练上大致经历过四个阶段： 决策树：早期PayPa...全文链接→🔗 网页链接 惠普5000万美元战略投资Hadoop 大数据平台Hortonworks，今年截至目前，Hadoop 公司所获总投资额已接近12亿美元 | 这次交易，钱只是一方面，曾表示“并不缺钱”的Hortonworks 看重的，可能是惠普与那些着缺乏成熟大数据平台的公司的深厚关系。详见：🔗 网页链接 