红联Linux门户
Linux帮助

如何通过awk去截取网上下载的url数据

发布时间:2014-10-06 15:45:17来源:红联作者:fuckloser
[attach]41047[/attach]
各位大神帮帮忙,小弟通过wget和一系列url去网上下载了一些数据,现在目前要做的工作是通过awk去截取所下载的数据,但是下载下来的数据的文件名是zycwzb_600003.html?type=report&part=chn,后面带着很多参数,用awk命令打不开,有什么好的解决办法么,想把每个文件的格式都改成.csv的,但是数量有点大,好几千个,求支招~
文章评论

共有 6 条评论

  1. 359274651@qq.co 于 2015-02-04 10:13:15发表:

    学习了

  2. afaffsafafa 于 2015-01-23 21:04:33发表:

    RAKsmart分享站群服务器操作具体手法
    做站群要注意1、域名
      现在的站群的域名上的规律显而易见,注册时间都在两三天内,大多数域名都是廉价的info域名,因此,以后百度势必会对这种域名作出判断,如果以前想做站群,可以试着从现在就开始注册域名,让站群的域名注册时间分开一些,一段时期内注册一些,而且尽量少用info域名,现在的info域名基本已经成为垃圾站的标志,百度以后势必会对info域名给予适当降权。域名的注册信息也要尽量不要一样。
      做站群要注意2、空间
      现在的站群清一色全是没有备-案,用的国外空间,而且大部分IP段都是一样的,因此,以后要做站群一定要搭配着来,弄一些备-案的用国内空间,弄一些国外空间,而且空间最好不要在同一家空间商买,因为在同一家空间商买空间经常IP段都是一样的。做站群还是选择名气大的服务器提供商,raksmart是公认的第一免备-案站群服务器,国内公认的最好的站群服务器,便宜、名气大,方便中小企业节省成本,支持258个独立ip。
      做站群要注意3、数量
      目前的站群都是突然一下子几百几千的上来,从站群的单个站来看,就是一个站一下子突增几百几千的外链,而且每天都是这个数目在增加,但是外链的域名数量就没什么变化了,这点势必也会引起百度的重视,未来,我们应该模拟一个正常的网站来做站群,正常的网站外链是一点一点往上增加的,用坐标轴来表现的话,会呈一条曲线状,因此,我们做站群,可以不用一上来就那么大规模,应该由小到大,一开始可能二三十个站,然后慢慢增加站的数量,这样,从一个单站来看,他的外链数量和外链的域名数量都是呈自然的曲线状在增加。
      就目前的形式看,百度对于外链权重的调整应该还没有那么快,但是现在太有规律的站群是肯定会被百度扼杀掉的,因此,未来要做站群,一定要尽量做到无规律。

  3. yuchunyan 于 2015-01-22 09:55:18发表:

    不会,求科普

  4. sfjjy 于 2014-10-25 09:55:33发表:

    没接触过,帮顶

  5. loveline 于 2014-10-16 17:52:36发表:

    这个在初学者园地估计有点难吧。建议移步

  6. 最佳蜗牛 于 2014-10-08 11:47:44发表:

    所以你的问题应该是:linux系统中,如何批量修改文件名/文件扩展名?