关于 夫妻缘份www.richdady.cn余储:wanjc_ 的搜索结果,共169
小****园 2018-07-10
让PB级云存不再神秘
只做入门常识级系统优化,没用专用文件系统也没写裸设备,据说每个节点有50%的性能优化地。 整体结构可以简化到不需要画架构图的地步,群集有几十个功能项,你想合并成几个服务也行,想分成几十个进程也对。 因为有超高的容错性,所以群集自协商机制比较简单,嗯,应该说是简陋。 我们不买高配服务器,因为我们的技术是做公有云过来的,公有云定价不看成本只看友商的价格,合理花钱才能生存下去持续服务;我们不做单点极限性能优化,那是招不到架构师才走的歪路。这是最有性价比最务实的架构方案,我们练得是一招致命的杀敌功,不是翩若惊鸿的表演性武术。 一个基于http对象存的架构场景有三个主要角色:读写代理、元数据、存服务。 读写代理,客户端直接访问的Web server,它不存数据只是代理。 元数据,客户可见的Metadata信息和不可见的Filehandle等信息都在这里。 存服务,实际数据落盘在这些服务器上,有不同的存形式。 此外还有些辅助角色,简单列一下但不细聊了。 客户端SDK,简化客户访问,还能做一些容错遮蔽。 群集状态同步服务,99%类似Zookeeper。
C****X 2018-07-10
群雄逐“图”,百度何备受关注?
高精度地图 (图片来源于文章《高精地图在无人驾驶中的应用》) 作为自动驾驶开发者阵营中的一员,关于地图,我们关注了如下几则消息: 2017年年中,自动驾驶领域的“隐藏实力者”苹果,搭载了十个32线激光雷达、摄像头、GPS 等传感器阵列的自动驾驶路测车被曝光。 在本次全新升级的车型上花了这么大价钱,苹果可能不单单是为了在路测上“称王称霸”,很大程度上是冲着高精度地图而来。 除了互联网企业高调“示爱”地图,整车厂商以及零部件公司也都在加紧钻研基于云的数据存和地图绘制方案。 例如,丰田和GM等汽车厂商曾在2016 CES展览上展示了自动驾驶汽车云地图的绘制技术。 在日本,汽车零部件供应商三菱以及地图商Zenrin已联合国内九家主流汽车制造商共同创建了“Dynamic MapPlanning”合资公司,为2020年东京奥运会上的无人驾驶服务提供3D道路高精度地图方面的技术支持。 这么看来,无论是创新的互联网企业还是传统的车企大厂,都在努力争取高精度地图这场比赛的入场券!
笑****山 2018-07-10
监控专用对象存的畅想
为什么要设计监控型对象存 写了《让PB级存不再神秘》以后,我很久没聊过对象存。我不想涉密去关注具体厂商的技术底实现,但会考虑通用技术可行性,做一个监控型对象存的技术畅想。 每天都有用监控抓小偷的新闻,监控行业的价值已经得到社会认可和买单;监控视频是最容易实现PB级文件容量和百亿级文件数量的场景,摄像头数量越来越多、清晰度越来越高,而文件管理、存和分析的压力也越来越大。 监控厂商自己做的堆盘式存是个临时应急性方案,而且客户要求开放式管理监控视频,中立又可靠的对象存方案是最佳选择。 最近几年IT行业并没有核心技术飞跃,我们能做的都是优化选型,过去针对http访问场景的优化选型,现在要做的是贴合监控场景的优化选型。 从客户访问和内部实现的角度,本文分为“访问界面”“读写代理”“元数据设计”“存实现”四部分。 访问界面 这里指的是应用程序访问界面,而不是自然人访问界面。访问界面有四个问题: 要不要存系统直接支持RTMP?直播和存技术跨度太大,且监控厂商已经有方案,低优先级处理该功能。 要不要提供文件系统级访问接口?
5****a 2018-07-11
监控专用对象存的畅想
为什么要设计监控型对象存 写了《让PB级存不再神秘》以后,我很久没聊过对象存。我不想涉密去关注具体厂商的技术底实现,但会考虑通用技术可行性,做一个监控型对象存的技术畅想。 每天都有用监控抓小偷的新闻,监控行业的价值已经得到社会认可和买单;监控视频是最容易实现PB级文件容量和百亿级文件数量的场景,摄像头数量越来越多、清晰度越来越高,而文件管理、存和分析的压力也越来越大。 监控厂商自己做的堆盘式存是个临时应急性方案,而且客户要求开放式管理监控视频,中立又可靠的对象存方案是最佳选择。 最近几年IT行业并没有核心技术飞跃,我们能做的都是优化选型,过去针对http访问场景的优化选型,现在要做的是贴合监控场景的优化选型。 从客户访问和内部实现的角度,本文分为“访问界面”“读写代理”“元数据设计”“存实现”四部分。 访问界面 这里指的是应用程序访问界面,而不是自然人访问界面。访问界面有四个问题: 要不要存系统直接支持RTMP?直播和存技术跨度太大,且监控厂商已经有方案,低优先级处理该功能。 要不要提供文件系统级访问接口?
TOP