linux python 新建脚本文件夹,遍历Linux文件夹下文件的Shell（及python）脚本

女爷i 2023-01-19 08:23 299阅读 0赞

1、脚本查看

nisjdeMacBook-Pro:Downloads nisj$ cat traveDir.sh

\#!/usr/bin/env bash

function read\_dir()\{

for file in \`ls $1\`

do

if \[ -d $1"/"$file \]

then

read\_dir $1"/"$file

else

cat $1"/"$file|grep "command=sh /data/etl/sh/agr\_common.sh dim"|awk -F" " '\{print $3\}'>>/Users/nisj/Downloads/runigJob.sql

fi

done

\}

rm -rf /Users/nisj/Downloads/runigJob.sql

read\_dir $1

2、调用示例

sh traveDir.sh /Users/nisj/WptWork/gitOnline/azkaban-job/src/etl-scheduler-subflow

3、注意说明

3.1、调用格式是：\[sh traveDir.sh 要遍历的路径\]

3.2、\[awk -F" " '\{print $3\}'\]的使用

3.3、Shell函数的使用

3.4、结果文件查看

nisjdeMacBook-Pro:Downloads nisj$ cat runigJob.sql

dim\_regist\_sc\_1d

dim\_sale\_id\_snap\_1d

dim\_sale\_uri\_snap\_1d

dim\_sc\_webtype\_1d

dim\_seller\_base\_snap\_1d

dim\_seller\_cfc\_organization\_full\_1d

dim\_share\_documents\_full\_chain\_1d

dim\_template\_category\_chain\_1d

dim\_user\_base\_curr\_snap\_1d

dim\_userinfo\_snap\_full\_1d

dim\_user\_yj\_artisan\_full\_1d

dim\_userinfo\_address\_full\_1d

dim\_userinfo\_basic\_info\_full\_1d

dim\_product\_category\_full\_1d

nisjdeMacBook-Pro:Downloads nisj$

3.5、一个查找文件中包含固定字符串的python脚本

/Users/nisj/Documents/wptDataGit-nisj/wptData/pyScript/love/findFile.py

\# encoding: utf-8

import os

def find(find\_text):

os.system("""find /Users/nisj/WptWork/gitOnline/etl/sql -maxdepth 1 -type f -name '\*.sql'|xargs grep -n '\{find\_text\}'|grep -v '\\--'>>/Users/nisj/Downloads/ods\_dependent.sql""".format(find\_text=find\_text));

find\_text\_list=\['ods\_activity\_sale\_apply\_full\_1d',

'ods\_activity\_sale\_apply\_full\_1d\_old',

'ods\_alcohol\_alcohol\_exchange\_full\_1d',

'ods\_alcohol\_alcohol\_full\_1d',

'ods\_alcohol\_alcohol\_order\_full\_1d',

'ods\_alcohol\_alcohol\_pay\_full\_1d',

'ods\_alcohol\_currency\_exchange\_full\_1d'\]

os.system(

"rm -rf /Users/nisj/Downloads/ods\_dependent.sql");

for find\_text in find\_text\_list:

find(find\_text=find\_text)

发表评论取消回复

表情：

评论列表（有 0 条评论，299人围观）

还没有评论，来说两句吧...

相关阅读

相关【shell】备份文件夹内文件的脚本

实现：（1）备份文件（2）添加日期后缀 !/bin/bash suffix=`date +%Y%m%d` for f in `f

水深无声/ 2024年03月02日 08:48/ 0 赞/ 64 阅读

相关 Python3遍历指定文件夹下所有文件及文件夹

import os def get_filelist(dir): for home, dirs, files in os.walk(dir):

约定不等于承诺〃/ 2023年10月05日 15:17/ 0 赞/ 81 阅读

相关 linux python 新建脚本文件夹,遍历Linux文件夹下文件的Shell（及python）脚本

1、脚本查看 nisjdeMacBook-Pro:Downloads nisj$ cat traveDir.sh \!/usr/bin/env bash function

女爷i/ 2023年01月19日 08:23/ 0 赞/ 300 阅读

相关 linux shell 脚本复制特定后缀文件到另外一个文件夹下

linux shell 脚本复制特定后缀文件到另外一个文件夹下 linux shell 特定后缀 linux复制一个文件夹下所有图片到内存卡 linux复制

曾经终败给现在/ 2023年01月12日 11:58/ 0 赞/ 230 阅读

相关 python（遍历）读取文件或文件夹

文章目录例子 os.listdir os.walk 遍历读取代码搞机器学习或者深度学习算法很多时候需要遍历某个目录读取文件，特别是经常需要读

超、凢脫俗/ 2022年12月10日 04:52/ 0 赞/ 229 阅读

相关 Shell脚本：linux构建大量测试文件或文件夹

文章目录 1、构造文件和文件夹 2、只构造文件 -------------------- 1、构造文件和文件夹

野性酷女/ 2022年09月08日 14:51/ 0 赞/ 212 阅读

相关 python遍历文件夹下的所有文件

os.path.walk() 只遍历一层 walk(root,callable,args)方法有三个参数：要遍历的目录，回调函数，回调函数的参数（元组形式）。调

淡淡的烟草味﹌/ 2022年08月21日 14:52/ 0 赞/ 24 阅读

相关 shell 脚本检测文件夹

01 测试，目录下是不是存在文件 packages if ! test ./packages ; then echo "not exist pac

Love The Way You Lie/ 2022年08月21日 04:12/ 0 赞/ 242 阅读

相关 shell脚本遍历文件夹下及其子文件下所有文件，本且替换指定文本

今天写了一个需求，在linux上，对一个文件夹下的所有文件中，指定的文本内容进行替换，比如把 www.baidu.com 替换成 www.google.com 1.先熟悉

左手的ㄟ右手/ 2022年05月09日 17:56/ 0 赞/ 817 阅读

相关 python 遍历文件夹文件

![复制代码][copycode.gif] import os import os.path rootdir = “d:\data”

分手后的思念是犯贱/ 2022年02月01日 01:47/ 0 赞/ 411 阅读