Showing posts with label grep. Show all posts
Showing posts with label grep. Show all posts

Saturday, September 10, 2016

AWK & grep: Comparison and Similarity

Command:

$ seq 1 10


Result:

1
2
3
4
5
6
7
8
9
10


Command:

$ seq 1 10 | grep '1'


Result:

1
10


Command:

$ seq 1 10 | awk '/1/'


Result:

1
10

Wednesday, June 8, 2016

Blogger: Total Posts in This Month

Command:

$ curl -vs "http://smashingtheory.blogspot.jp" 2>&1 | grep -o -m 2 "<span class='post-count' dir='ltr'>([0-9]*)" | tail -1 | sed -e 's/[^[[:digit:]]]*//g'

Result:

33

Blogger: Total Posts in This Year

Command:

$ curl -vs "http://smashingtheory.blogspot.jp" 2>&1 | grep -o -m 1 "<span class='post-count' dir='ltr'>([0-9]*)" | sed -e 's/[^[[:digit:]]]*//g'

Result:

477

Saturday, March 19, 2016

sed: Removing Tabs (control-V + tab), Spaces, and Empty Lines

$ curl -vs "http://www.gizmodo.jp" 2>&1 | grep "<a href=" | sed -e 's/<[^>]*>//g' | sed 's/    //g' | sed 's/ //g' | sed '/^$/d'

GIZStaff
AboutGIZ
トモダチともっと仲良くなれるかも?任天堂初のスマホアプリ「Miitomo」公開
安いぞ!PlayStationVRが4万4980円で10月に発売決定!
iPhoneSEの見た目はiPhone5sとほとんど一緒に?
最強の仮想現実。VRを超える「スーパーVR」ってなに?
電動でも手磨きでも大切なのは、「ドライ」と「ヨコ」。歯科衛生士に聞いた、歯磨きの新常識
...蕎麦かな?シドニーのユニークなデザインの新図書館、何に見えますか微生物が持つべん毛モーター、その姿が初めて詳細まで捉えられましたえ?酔ってんの?IoTならぬNoT?超効率的なネトフリハックを実現する研究所に潜入成功!8KビデオカメラREDWeapon8Kが捉える。ダマスカスの剣に挑戦する鍛冶師(動画あり)ジェダイになってライトセーバーを振れるVRゲーム「タトゥイーンの試練」もう、どのプラグか迷わない!たこ足配線のプラグ用ステッカーSXSWトレードショーレポート:イノベーションはいつも風の通る場所で生まれる
カメラ
クルマ
スマートフォン
タブレット
ウェラブル(スマートウォッチ)
Mac/PC
家電
ゲーム
ミュージック
ニュース
IoT(InternetofThings)
スタッフ
AboutGizmodo
ギズモードジャパン
twitter
RSS
facebook
google+
instagram
tumblr
カメラ
クルマ
スマートフォン
タブレット
ウェラブル(スマートウォッチ)
Mac/PC
家電
ゲーム
ミュージック
ニュース
IoT(InternetofThings)
スタッフ
AboutGizmodo
//document.write('');
TOP
NEXT>
...蕎麦かな?シドニーのユニークなデザインの新図書館、何に見えますか
デザイン
続きを読む&raquo;
微生物が持つべん毛モーター、その姿が初めて詳細まで捉えられました
サイエンス
続きを読む&raquo;
え?酔ってんの?
動画
続きを読む&raquo;
電動でも手磨きでも大切なのは、「ドライ」と「ヨコ」。歯科衛生士に聞いた、歯磨きの新常識
PR
続きを読む&raquo;
IoTならぬNoT?超効率的なネトフリハックを実現する研究所に潜入成功!
PR
続きを読む&raquo;
8KビデオカメラREDWeapon8Kが捉える。ダマスカスの剣に挑戦する鍛冶師(動画あり)
カメラ全般
続きを読む&raquo;
ジェダイになってライトセーバーを振れるVRゲーム「タトゥイーンの試練」
Kotaku
続きを読む&raquo;
もう、どのプラグか迷わない!たこ足配線のプラグ用ステッカー
Mac/PC関連
続きを読む&raquo;
SXSWトレードショーレポート:イノベーションはいつも風の通る場所で生まれる
VR
続きを読む&raquo;
ギズと一緒に夜更かししませんか?アップル新製品発表イベントの様子をリアルタイムで更新します!
iPad/iPod/iPhone/iTunes
続きを読む&raquo;
たった2秒の早業!スキミング装置が取り付けられる瞬間を防犯カメラが捉えた
ハッキング
続きを読む&raquo;
最強ミュータントの素顔が判明?「X-MEN:アポカリプス」予告編
Kotaku
続きを読む&raquo;
旧型Kindle、3月22日までにアップデートしないと使えなくなるかも
Kindle
続きを読む&raquo;
発想の転換。「地球を観察するならどこからするか」からエイリアンを探すのはどうか
サイエンス
続きを読む&raquo;
最強の仮想現実。VRを超える「スーパーVR」ってなに?
VR
続きを読む&raquo;
iPhoneのアプリ立ち上げアニメーションをなくして最速化する方法
iPhone
続きを読む&raquo;
TOP
NEXT>
iPhoneSE、まさかの1200万画素カメラを搭載してくる?#iPhone#Apple
Macユーザーならわかる、この充電アダプターの便利さが
デザインからスペックまで...iPhoneSEについて、現時点でわかっているすべてのこと
素数の出方はランダムではなかった。1億個調べて浮かんだ奇妙な数
電動でも手磨きでも大切なのは、「ドライ」と「ヨコ」。歯科衛生士に聞いた、歯磨きの新常識
安いぞ!PlayStationVRが4万4980円で10月に発売決定!
どうして英語には同義の単語が多いの?
象の風葬を2分で(動画)
VRはこれがなぁ...、嫌なのよねぇ
アプリを終了させてもiPhoneのバッテリーは長持ちしないことが判明
heartbeats
Yahoo!ニュース
livedoorNEWS
MSNデジタルライフ
alt="アメーバニュース
exciteニュース
antenna
・製品情報および投稿希望者のお問い合わせ
媒体資料
お問い合わせ
US
UK
France
Germany
Italy
Spain
Australia
Brazil
lifehacker
kotaku
gene
カフェグローブ
mylohas
恋愛スタイリングメディア[グリッティ]
roomie
メディアジーン
インフォバーン

<ahref="http://www.gizmodo.jp/2009/01/gizmodojapan.html#ad"target="_blank"class="*Connection#0tohostwww.gizmodo.jpleftintact

Friday, March 18, 2016

cURL: Extracting Only Title from Gigazine

$ curl -vs "http://gigazine.net" 2>&1 | grep "<h2 class=\"title\">" | sed -e 's/<[^>]*>//g' 

カレーにレモンを加えて後味さっぱりな「日清レモンクリームカレーメシ」を食べてみました
まさかの世界初水冷ノートPC「ROG GX700VO」実機レビュー、外付け水冷ユニットでオーバークロックの実力やいかに?
抗生物質が効かない悪魔のスーパーバグがどれくらい怖い存在なのか理解できるムービー「The Antibiotic Apoca
「給料が多いほど仕事が好き」「よく使うプログラミング言語」「開発環境」「開発者歴」「OS」など世界中の開発者の統計をまとめ
無料でスタジオジブリのアニメ制作ソフト「OpenToonz」を公開するとドワンゴが発表
2016年3月18日のヘッドラインニュース
女優の表情や動作をリアルタイムでゲームに反映するすさまじい技術
国務長官時代にヒラリー・クリントンが使うよう強く勧められた開発費18億円のスマートフォンとは?
心臓の不整脈をApple Watchと機械学習で特定することに成功
史上最強の小型ゲーミングPCにもなるNUC「Skull Canyon」のスペック・発売日・価格をIntelが満を持して発表
アルツハイマー病になって失われた記憶は復元できる可能性が示される
任天堂のいわっちこと岩田聡の偉業をアニメーションで振り返るGDCムービーで号泣する人続出
「神 VS X-MEN」、X-MENが黙示録の四騎士を率いる神と激突し結成秘話も明かされる映画「X-MEN:アポカリプス」
たった235円でコーヒーにゆで卵&トースト付きな上、コーヒーおかわり自由とコスパ極限レベルのデニーズ新モーニングセット
Twitter公式クライアント「TweetDeck」Windows版がサポート終了
自動運転ロボット「DRU」を使った無人ピザ宅配をドミノ・ピザが開始
Googleがボストン・ダイナミクスを売却へ、売却先にはトヨタ・Amazonが浮上
コンバージョン率を劇的にアップさせるための30の心理作戦
スプラトゥーンのシオカラーズamiibo風フィギュア・ストラップ・ぬいぐるみ・シールなど、スプラトゥーン手作りグッズまとめ
限られた土地で「縦方向」に環境を考えつつ都市を築いていくシミュレーションゲーム「Block’hood」
225gの巨大パティ使用の「カールスジュニア」シックバーガーを食べてきた
「もっと飲みたい」というアルコール中毒の欲望を抑えることが可能になる研究結果が発表される
台湾のかき氷店「アイスモンスター」が新メニュー「桜ミルクかき氷」と一緒に大阪にも上陸したので見に行ってきました
DNAがダメージを受けたとき体内では何が起きているのか?
無料で簡単に文字入り画像を作ってTwitterやFacebookに即投稿できるサービス「Spruce」
忙しい現代人の栄養補給にピッタリかもしれない世界最小の腕時計型お弁当「BENTO WATCH」
2016年3月17日のヘッドラインニュース
バイドゥが自動運転カーの公道走行テストを拡大、数年後の市販化を目指す
3億700万年前に実在した謎のモンスターの全体像が判明

Googleが人工知能AlphaGoと世界最強棋士の対局から学んだ2つのこと

cURL: Extracting Only Titles from Yahoo! News Japan

$ curl -vs "http://news.yahoo.co.jp" 2>&1 | grep "<span class=\"ttl\">" | sed -e 's/<[^>]*>//g' | tr -s " "

 <山陽道トンネル事故>追突のトラック運転手を逮捕
 神戸・長田女児殺害事件 君野被告に死刑判決
 CLベスト8の対戦カードが決定…連覇目指すバルサの相手はアトレティコ
 あだ名は「ホラッチョ」「おっぺけぺー川上」ショーン氏同級生語る
 マドンナ、公演ステージでファン女性の胸露出させる
 <「2人以上出産」校長>休日校門に旭日旗 大阪市調査へ
 ショーンK後任キャスターにハーバード卒米国人 モーリー氏
 首相、消費増税先送り検討…経済減速に配慮
 南極・南米海域を巡り「飛鳥2」が横浜に帰港
 <動画>藤岡弘、「映画っていいな」 45年ぶりの本郷猛役に「楽しかった」
 相模川女性殺害遺棄事件 男「自分守ろうと殴った」
 ショーンK氏経歴詐称騒動を考える──テレビ局、ネット炎上、「有名性」と「キャラ化」、『クヒオ大佐』
 遂に「新段階」へ突入か…米国の対北朝鮮制裁
 なぜ元プロ野球選手・清原和博氏の保釈が認められたのか。知られざる保釈制度の実態とは
 仲間由紀恵は遠ざかる? 「相棒」最終回でわかった反町隆史の“行く末”〈dot.〉
 「ポスト中居」井ノ原快彦 3億円豪邸で家庭菜園の優雅な生活
 iPhone新製品「3月発表」に込められた"狙い"
 安倍首相「経済状況を注意深く見守る」 消費税率10%への引き上げで
 返済不要奨学金公約へ=民主

 神戸小1女児殺害 際立つ犯行の残虐性、死刑判断へ先例踏襲せず

cURL: Extracting Only Titles from 2ch

$ curl -vs "http://headline.2ch.net/bbynews/" 2>&1 | iconv -c -f SJIS | grep "野球" | sed -e 's/<[^>]*>//g'

2016/03/18 20:57:43 [芸+]【野球】巨人、きれいな球団として再生へ若手教育 震災についてのレポートなど課す [無断転載禁止]&#169;2ch.net  
2016/03/18 20:42:37 [芸+]【野球賭博】王貞治「集中力を高めるために現金のやり取りをした。金銭授受と言う言葉はきつい表現だから使うな」 [無断転載禁止]&#169;2ch.net  
2016/03/18 20:40:59 [芸+]【野球】 清原和博被告、血糖値900以上。 保釈後は循環器治療の名医の下、糖尿病治療へ。★2&#169;2ch.net  
2016/03/18 20:15:39 [芸+]【野球賭博】プロ野球界全体の体質や姿勢までが問われる深刻な事態 [無断転載禁止]&#169;2ch.net  
2016/03/18 19:57:28 [芸+]【野球】「ホラッチョは熊本の言葉、方言じゃないですよ。聞いたことがない」 ショーンKと同郷のロッテ・伊東監督がコメント&#169;2ch.net  
2016/03/18 19:53:01 [芸+]【野球】清原が保釈     ★2 [無断転載禁止]&#169;2ch.net  
2016/03/18 19:33:21 [芸+]【野球】阪神 中日に12安打6点で逆転勝ち、高山追撃の適時打 横田が3安打 [無断転載禁止]&#169;2ch.net  
2016/03/18 19:30:28 [芸+]【野球】阪神1位高山が安打製造器の本領!10戦連続安打 .333 [無断転載禁止]&#169;2ch.net  
2016/03/18 19:24:15 [芸+]【野球】阪神・横田、オープン戦首位打者に浮上! 3安打猛打賞 .432 [無断転載禁止]&#169;2ch.net  
2016/03/18 19:08:06 [芸+]【野球賭博】コミッショナー、賭博問題などでノンフィクション作家の吉永みち子氏らから意見聞く [無断転載禁止]&#169;2ch.net  
2016/03/18 19:01:47 [芸+]【野球】裁判所が小物と認定!?清原容疑者の保釈金が小室哲哉の6分の1だったワケ (アサ芸プラス) [無断転載禁止]&#169;2ch.net  
2016/03/18 18:18:12 [芸+]【野球賭博】野球以外で注目される巨人 チーム関係者「清原が保釈されれば、メディアの注目が一気にそっちに行ってくれるのでは…」&#169;2ch.net  
2016/03/18 18:11:57 [芸+]【野球】巨人野球賭博問題が再燃!「自分の考えを文章で表現することが重要」と新聞を読ませてレポート提出!テーマは東日本大震災&#169;2ch.net  
2016/03/18 18:06:08 [芸+]【野球賭博】坂上忍、次々発覚する球界問題に怒り「野球界が率先して自浄能力を示して洗い出しておけば、こんなことにはならなかった」&#169;2ch.net  
2016/03/18 18:05:56 [芸+]【野球】元タニマチが明かした清原の覚せい剤使用法 指にローションを塗り、粉末のシャブをすくい取り、肛門にねじ込む“ケツ入れ”★2 [無断転載禁止]&#169;2ch.net  
2016/03/18 17:52:06 [芸+]【野球賭博】野球界は覚醒剤、賭博とダーティーなイメージ 子供の野球離れがこのまま進めばプロ野球衰退も…★2 [無断転載禁止]&#169;2ch.net  
2016/03/18 16:49:50 [芸+]【野球賭博】張本勲氏ら有識者5人が野球賭博問題で意見 [無断転載禁止]&#169;2ch.net  
2016/03/18 15:57:45 [芸+]【野球】 清原和博被告、血糖値900以上。 保釈後は循環器治療の名医の下、糖尿病治療へ。&#169;2ch.net  
2016/03/18 15:04:41 [芸+]【野球賭博】「巨人崩壊」のカギを握るのは清原和博!? 法廷で球界の「野球賭博」「薬物」実情を語る可能性大な理由 [無断転載禁止]&#169;2ch.net  
2016/03/18 14:55:11 [芸+]【野球】<ロッテ>開幕戦の前売り完売 全員に記念ロゴ入りユニホーム、カレンダーを配布 土屋太鳳が始球式&#169;2ch.net  
2016/03/18 14:26:33 [芸+]【野球賭博/メディア】ショーンK経歴詐称で日テレ大攻勢 報道で世間を呆れさせた野球賭博問題にあまり触れることが出来ないため… [無断転載禁止]&#169;2ch.net  
2016/03/18 14:20:16 [芸+]【野球賭博】野球賭博と現金授受 「週刊誌」の取材で判明したところに問題の深刻さがある [無断転載禁止]&#169;2ch.net  
2016/03/18 14:10:25 [芸+]【野球賭博】<現金授受>楽天ファン「巨人とは違う」「プロ意識がない」 [無断転載禁止]&#169;2ch.net  
2016/03/18 14:07:05 [芸+]【野球賭博】野球賭博事件で見えたプロ野球界の「モラルの低さ」と「危機感の希薄さ」 [無断転載禁止]&#169;2ch.net  
2016/03/18 13:06:39 [芸+]【浜松新野球場】 建設事業費の減額案が県議会で可決 野球場構想は仕切り直しへ [無断転載禁止]&#169;2ch.net  
2016/03/18 12:58:36 [芸+]【センバツ高校野球】今こそ振り返りたい”1973年の江川卓” [無断転載禁止]&#169;2ch.net  
2016/03/18 12:50:55 [芸+]【野球】清原被告が入院の病院「特別室」料金は5万4000円 [無断転載禁止]&#169;2ch.net  
2016/03/18 10:55:49 [芸+]【野球】笠原元投手、「真実話す」ツイートを削除 [無断転載禁止]&#169;2ch.net  
2016/03/18 10:45:41 [芸+]【野球】清原被告行きつけの寿司店主は心配「更生して野球界に戻ってくれたら」 [無断転載禁止]&#169;2ch.net  
2016/03/18 10:39:54 [芸+]【野球賭博】<東北楽天ゴールデンイーグルス>選手間で金銭授受!「皆さまのご期待に沿える結果を出せるよう、頑張ってまいります」★2&#169;2ch.net  
2016/03/18 10:39:35 [芸+]◆芸スポ+雑談スレッド★494★第88回選抜高校野球大会[03/18〜] [無断転載禁止]&#169;2ch.net  
2016/03/18 10:22:03 [芸+]【野球】気持ちで相手を上回れば試合に勝てるか?/里崎評論 [無断転載禁止]&#169;2ch.net  

2016/03/18 10:13:52 [芸+]関東ではプロ野球中継は視聴率の低下で地上波を追われ、BSやCSの一