当前位置:网站首页 /

Hadoop之kafka

Hadoop之kafka

  Kafka是一个分布式的、高吞吐的、基于发布/订阅的消息系统。利用kafka技术可以在廉价PCServer上搭建起大规模的消息系统。Kafka具有消息持久化、高吞吐、分布式、实时、低耦合、多客户端支持、数据可靠等诸多特点,适合在线和离线的消息处理。是用Scala开发的,起初应用于Linked...

2017年06月28日 | 分类:大数据 | 浏览:822 次 | 评论:0 人 | TAG:学习笔记,大数据,Hadoop,kafka,

Hadoop之MapReduce

Hadoop之MapReduce

  2003年Google发表《GoogleFileSystem》,即GFS集群,主要包括Masternode和Chunkservers。在2004年Google发表论文并引入MapReduce的概念,两位创始人谢尔盖布林和拉里佩奇就是凭借其在斯坦福大学时期发明的MapReduce算法解决了大...

2017年06月27日 | 分类:大数据 | 浏览:461 次 | 评论:0 人 | TAG:学习笔记,大数据,Hadoop,mapreduce,

Hadoop之HBase&Hive

Hadoop之HBase&Hive

  HBase(HadoopDatabase),是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统。其底层的文件系统是HDFS,使用阿里的开源框架——动物园管理员Zookeeper来管理集群间的HMaster和各Regionserver之间的通信,监控各Regionserver的状态,存储...

2017年06月27日 | 分类:大数据 | 浏览:554 次 | 评论:0 人 | TAG:学习笔记,大数据,Hadoop,HBase,Hive,
名言警句
«   2019年1月   »
123456
78910111213
14151617181920
21222324252627
28293031
随机文章
友情链接
最新留言
  • ALTER TABLE member ALTER COLUMN username SET DEFAULT '亲爱的用户';
  • 留名收藏,肯定有用的
  • 文章不错非常喜欢
  • 偶然路过,博主加油!!!
  • usermod -l developer -d /home/developer -m sftp_asyn_owngroupmod -n developer sftp_asyn_own
  • 文章不错非常喜欢
  • 赞一个,学习了
  • 向下的目录可以是非root用户
  • ChrootDirectory目录必须是root用户所有,目录开始一直往上到系统根目录为止的目录拥有者都只能是 root,用户组可以不是 root, 权限是 750 或者 755
  • [root@iZ23am9cwvgZ sftpFinance]# mount -t nfs -o rw 10.174.107.216:/alidata/sftpFinance /alidata/sftpFinance mount.nfs: rpc.statd is not running but is required for remote locking.mount.nfs: Either use '-o nolock' to keep locks local, or start statd.mount.nfs: Operation not permitted[root@iZ23am9cwvgZ sftpFinance]# /sbin/service nfslock start[root@iZ23am9cwvgZ sftpFinance]#
  • chown root:root ./sftp_bill99
  • fatal: bad ownership or modes for chroot directory "/alidata/sftpFinance/sftp_own"→chown -R root:root /alidata/sftpFinance/sftp_own
  • aliyun linux 4以前的版本的重启命令:/etc/init.d/sshd restart4以后的版本重启命令:systemctl restart sshd
  • chmod 600 ./.ssh/authorized_keyschmod 700 .ssh
  • 加油,青衫慧博客域名已更换为:qsh5.cn 麻烦贵站更新一下友链,谢谢
  • 您的鼓励,我的动力
  • 我是IT客
  • 歌曲 - 歌手
    0:00