We spent more than 6 months migrating our PBs data located in Beijing to Shanghai. This slide gives you a brief introduction about how we do it. How We Migrate PBs Data from Beijing to ShanghaifromJasey Wang Related Posts: Migrating GitHub Enterprise…
今年4月的Spark技术峰会上我做了《SuperVessel：基于OpenStack, Docker和Spark打造大数据公有云》的技术分享: 基于OpenStack和Docker打造Spark大数据服务 新浪微盘下载链接 1.首先请介绍下您自己,以及您在 Spark 技术方面所做的工作。 我是IBM中国研究院的高级研究员，大数据云方向的技术负责人，我的微博是@冠诚。我们围绕Spark主要做两方面的事情： （1） 在IBM研究院的SuperVessel公有云（http://www.ptopenl…
sproto 由于主要供 lua 使用，是不能在协议定义中描述缺省值的。所有不编码的字段都呈现为 lua 中的 nil 。 注：这里还有个实现上的小问题。如果一个数组为空，也会呈现为 nil 而不是空表，所以应当注意处理。 我最近给 sproto 增加了一个新的 api ，可以为一类消息生成一个全部为缺省值的 table 。这样，使用者就可以方便把这个 table 作为别的 table 的 metatable 中的 index 方法了。相当于实现了原来在 protobuf 中的缺省值的特性。 只…
随着智能汽车，车联网的普及，关于黑客威胁汽车安全的讨论也越来越多，但是大多数讨论和文章没有技术基础，讨论往往隔靴搔痒，结论自然也就不靠谱，那么黑客到底能不能威胁我们的汽车安全呢，我们来做个深度解读。 汽车被入侵的危险性在现在的汽车上，我们几乎已经不直接通过机械装置控制汽车了，我们踩下油门之后，并不是直接通过钢丝来控制节气门开合，而是油门踏板传感器把我们踩下的信号传给行车电脑，行车电脑根据感应，通过马达来控制节气门开启的程度，达到让汽车加速的目的。现代汽车的开发调试标定，其实很多都是软件…
钛媒体注：说到上门服务，先不说这个市场当下有多火爆多流行，但是这个概念却已经被炒得滚瓜烂熟了。各类上门洗车、上门保洁、上门美业、上门按摩等O2O平台如后春笋般地涌现了出来，一方是以养车点点、7点钟、阿姨帮等为代表的垂直模式，而另一方则是野心勃勃欲称霸整个上门服务市场的平台商，58到家是其典型代表。这个话题在钛媒体也引发了激烈的争论，点击查看钛媒体此前文章《晕了，上门洗车、到店洗车、自助洗车⋯⋯各种洗车应用已经有100多家》、《上门服务已中毒太深，皮条客生意模式如何洞穿？》。就此钛媒体…
最近，人工智能再次成为互联网的热点。据《日本经济新闻》5月10日报道，日立制作所计划将2016年度之后的研发费用较2015年度预期增加约30%，增至每年5000亿日元左右。规模将与在世界市场上竞争的美国通用（GM）和德国西门子相匹敌，资金将集中投向传感器、人工智能和机器人。而在不久前，百度的李彦宏则认为最新的机会，挑战来自于人工智能，人工智能的风口已经到来。对于人工智能，很多人并不了解，我也如此。关于这个问题，我与我的朋友人工智能工程师张思楠进行了一番关于人工智能的交流。下面我把这些交流写出来，…
Google 彻底被墙快满一周年了，这一年学习和工作受到了严重的影响。 尽管可以翻墙去使用 Google，但是有时连翻墙手段都不稳定的情况下，此刻又有搜索国外技术内容的需求时怎么办？ 最近我发现了一个在 Nginx 上方便建立 Google Mirror（即 Google 反向代理）的项目，通过它，你可以很容易地在自己的国外服务器上建立一个 Google 镜像，可以方便地去使用 Google 搜索。它就是：ngx_http_google_filter_module 由于编译使用 Nginx + …
《复仇者联盟2》在今天凌晨火热上映，真爱粉们是不是已经从电影院回来啦？钢铁侠的刀枪不入、美国队长的超人体质、鹰眼的百发百中……这些超能力都要羡慕死人了！钛妹就经常暗自想，什么时候科技的发展能够辅助人类拥有超能力啊！！来参加5月29日的钛·边缘大会，用事实告诉你，这个愿望不！太！远！这里有分分钟进入太空的航天飞机、还有会飞的汽车、还有帮助盲人“看”世界的舌头、还有…还有…太多啦，说不完，好奇的…