Submit Search
Upload
3-1
•
Download as PPTX, PDF
•
0 likes
•
600 views
Atsushi Hara
Follow
「生命科学者のためのDr.Bonoデータ解析実践道場」読書会 @大阪 https://oum-python.connpass.com/event/149085/
Read less
Read more
Technology
Report
Share
Report
Share
1 of 24
Download now
Recommended
Programming under capability mode
Programming under capability mode
Yuichiro Naito
Programming guide under capability mode.
Slide
Slide
Kazki Matsumoto
Linuxのファイルシステムについて調べてみた
Linuxのファイルシステムについて調べてみた
basicinc_dev
株式会社ベーシックの第7回TGIFで発表された@kkyouheiさんの資料。温故知新シリーズ「Linuxのファイルシステムについて調べてみた」
詳解UNIXプログラミング 第4章 ファイルとディレクトリ
詳解UNIXプログラミング 第4章 ファイルとディレクトリ
Takaya Kotohata
個人的な学習用です 間違いがあったら指摘いただけると助かります http://tkot.hatenablog.com/
Custom Package Building with Poudriere
Custom Package Building with Poudriere
Yuichiro Naito
building my own FreeBSD packages
全文検索エンジンMroonga_エンジニア勉強会20140418
全文検索エンジンMroonga_エンジニア勉強会20140418
エンジニア勉強会 エスキュービズム
4月18日のエスキュービズム社内勉強会で使用した資料になります。
Linuxとファイル
Linuxとファイル
Jun Ishitsuka
The material for Lightning Talk. About file system of Linux.
RとSQLiteで気軽にデータベース作成
RとSQLiteで気軽にデータベース作成
弘毅 露崎
Recommended
Programming under capability mode
Programming under capability mode
Yuichiro Naito
Programming guide under capability mode.
Slide
Slide
Kazki Matsumoto
Linuxのファイルシステムについて調べてみた
Linuxのファイルシステムについて調べてみた
basicinc_dev
株式会社ベーシックの第7回TGIFで発表された@kkyouheiさんの資料。温故知新シリーズ「Linuxのファイルシステムについて調べてみた」
詳解UNIXプログラミング 第4章 ファイルとディレクトリ
詳解UNIXプログラミング 第4章 ファイルとディレクトリ
Takaya Kotohata
個人的な学習用です 間違いがあったら指摘いただけると助かります http://tkot.hatenablog.com/
Custom Package Building with Poudriere
Custom Package Building with Poudriere
Yuichiro Naito
building my own FreeBSD packages
全文検索エンジンMroonga_エンジニア勉強会20140418
全文検索エンジンMroonga_エンジニア勉強会20140418
エンジニア勉強会 エスキュービズム
4月18日のエスキュービズム社内勉強会で使用した資料になります。
Linuxとファイル
Linuxとファイル
Jun Ishitsuka
The material for Lightning Talk. About file system of Linux.
RとSQLiteで気軽にデータベース作成
RとSQLiteで気軽にデータベース作成
弘毅 露崎
追いかけファイル読み込み開発注意点
追いかけファイル読み込み開発注意点
Tetsuya Sasamori
データベースのお話
データベースのお話
Hidekazu Tanaka
第24回R勉強会@東京(#TokyoR)で発表したスライド
Firefox OS + Raspberry Pi
Firefox OS + Raspberry Pi
EnsekiTT
Raspberry Piの中でFirefoxOSを起動するまでを周辺知識を無視して結果のみを一本釣りするチュートリアル。 Raspberry PiにRaspbianをインストールする部分についてはあくまで補足です。
シェルスクリプトを極める
シェルスクリプトを極める
bsdhack
シェルスクリプトワークショップの資料です。
LINQ基本のキ
LINQ基本のキ
Kouji Matsui
LINQ基本のキ 第8回まどべんよっかいち 2014.3.29 http://www.kekyo.net/2014/03/29/%e7%ac%ac8%e5%9b%9e%e3%81%be%e3%81%a9%e3%81%b9%e3%82%93%e3%82%88%e3%81%a3%e3%81%8b%e3%81%84%e3%81%a1%e3%80%8clinq%e5%9f%ba%e6%9c%ac%e3%81%ae%e3%82%ad%e3%80%8d/
分散データベース gun について調べた
分散データベース gun について調べた
keisunagawa
分散データベース gun について調べた話
Unix1
Unix1
Takaya Kotohata
http://tkot.hatenablog.com/ 詳解UNIXプログラミングの学習用メモです。
カウチなやつら CouchDB in the room
カウチなやつら CouchDB in the room
Makoto Ohnami
OSC 2009 Tokyo Fall のCouchDBセッションにて話したときのスライドです。主にCouchDBの基本的な事項をまとめています。
Mongo db勉強会
Mongo db勉強会
otmb
社内向けにMongoDB勉強会をしました。 社内フレームワークDecoでの実装について。
Pgunconf neo4j fdw
Pgunconf neo4j fdw
Toshi Harada
2013/7/13 PostgreSQL Unconference
hiding
hiding
cookies 146
Nas
Nas
akipon yopida
Cache勉強会
Cache勉強会
Shinji Miyazato
キャッシュについての勉強会資料です
Ec2でのdisk拡張方法
Ec2でのdisk拡張方法
Takamasa Sakai
#dlearning_osaka の資料です
20150520 lt-neo4j勉強会-neofj fdw
20150520 lt-neo4j勉強会-neofj fdw
Toshi Harada
PostgreSQL Foreign Data Wrapper, neo4j_fdw demo.
Bazaar
Bazaar
KLab株式会社
コード読経会
コード読経会
Masahiko Toyoshi
某SIer若手社員のためのソースコード読経会資料
PHP+DB
PHP+DB
Sawada Makoto
第4回 ABC用資料 PHPでDB(MySQL)につなぐ方法、実行する方法について学びます。
ドキュメント共有システム「ShareDoc」
ドキュメント共有システム「ShareDoc」
Wataru Shiraishi
ShareDocはファイルサーバやFTPサーバよりもわかりやすく、スマートなファイル共有を実現します。分類やキーワードの登録、ドキュメントのカラー設定などで効率よくファイルを探し出せます。 インターネットやイントラネットに接続できるパソコンとWebブラウザさえあれば利用できます。 http://www.jirokichi.co.jp/products/sharedoc
ファイルの隠し方
ファイルの隠し方
mfumi
第01回北関東情報セキュリティ勉強会 目覚ましLT資料
extracting only a necessary file from a zip file
extracting only a necessary file from a zip file
Toshiyuki Shimono
多数のファイルを梱包したzip形式圧縮ファイルから、1つまたは必要なファイルだけを解凍して取り出すシェル芸。
210609 Biopackthon: BioImageDbs for ExperimentalHub (修正版)
210609 Biopackthon: BioImageDbs for ExperimentalHub (修正版)
Satoshi Kume
BioImageDbs (for ExperimentHub)の開発とそこから学んだパッケージ作成のTipsについて
More Related Content
What's hot
追いかけファイル読み込み開発注意点
追いかけファイル読み込み開発注意点
Tetsuya Sasamori
データベースのお話
データベースのお話
Hidekazu Tanaka
第24回R勉強会@東京(#TokyoR)で発表したスライド
Firefox OS + Raspberry Pi
Firefox OS + Raspberry Pi
EnsekiTT
Raspberry Piの中でFirefoxOSを起動するまでを周辺知識を無視して結果のみを一本釣りするチュートリアル。 Raspberry PiにRaspbianをインストールする部分についてはあくまで補足です。
シェルスクリプトを極める
シェルスクリプトを極める
bsdhack
シェルスクリプトワークショップの資料です。
LINQ基本のキ
LINQ基本のキ
Kouji Matsui
LINQ基本のキ 第8回まどべんよっかいち 2014.3.29 http://www.kekyo.net/2014/03/29/%e7%ac%ac8%e5%9b%9e%e3%81%be%e3%81%a9%e3%81%b9%e3%82%93%e3%82%88%e3%81%a3%e3%81%8b%e3%81%84%e3%81%a1%e3%80%8clinq%e5%9f%ba%e6%9c%ac%e3%81%ae%e3%82%ad%e3%80%8d/
分散データベース gun について調べた
分散データベース gun について調べた
keisunagawa
分散データベース gun について調べた話
Unix1
Unix1
Takaya Kotohata
http://tkot.hatenablog.com/ 詳解UNIXプログラミングの学習用メモです。
カウチなやつら CouchDB in the room
カウチなやつら CouchDB in the room
Makoto Ohnami
OSC 2009 Tokyo Fall のCouchDBセッションにて話したときのスライドです。主にCouchDBの基本的な事項をまとめています。
Mongo db勉強会
Mongo db勉強会
otmb
社内向けにMongoDB勉強会をしました。 社内フレームワークDecoでの実装について。
Pgunconf neo4j fdw
Pgunconf neo4j fdw
Toshi Harada
2013/7/13 PostgreSQL Unconference
hiding
hiding
cookies 146
Nas
Nas
akipon yopida
Cache勉強会
Cache勉強会
Shinji Miyazato
キャッシュについての勉強会資料です
Ec2でのdisk拡張方法
Ec2でのdisk拡張方法
Takamasa Sakai
#dlearning_osaka の資料です
20150520 lt-neo4j勉強会-neofj fdw
20150520 lt-neo4j勉強会-neofj fdw
Toshi Harada
PostgreSQL Foreign Data Wrapper, neo4j_fdw demo.
Bazaar
Bazaar
KLab株式会社
コード読経会
コード読経会
Masahiko Toyoshi
某SIer若手社員のためのソースコード読経会資料
PHP+DB
PHP+DB
Sawada Makoto
第4回 ABC用資料 PHPでDB(MySQL)につなぐ方法、実行する方法について学びます。
ドキュメント共有システム「ShareDoc」
ドキュメント共有システム「ShareDoc」
Wataru Shiraishi
ShareDocはファイルサーバやFTPサーバよりもわかりやすく、スマートなファイル共有を実現します。分類やキーワードの登録、ドキュメントのカラー設定などで効率よくファイルを探し出せます。 インターネットやイントラネットに接続できるパソコンとWebブラウザさえあれば利用できます。 http://www.jirokichi.co.jp/products/sharedoc
ファイルの隠し方
ファイルの隠し方
mfumi
第01回北関東情報セキュリティ勉強会 目覚ましLT資料
What's hot
(20)
追いかけファイル読み込み開発注意点
追いかけファイル読み込み開発注意点
データベースのお話
データベースのお話
Firefox OS + Raspberry Pi
Firefox OS + Raspberry Pi
シェルスクリプトを極める
シェルスクリプトを極める
LINQ基本のキ
LINQ基本のキ
分散データベース gun について調べた
分散データベース gun について調べた
Unix1
Unix1
カウチなやつら CouchDB in the room
カウチなやつら CouchDB in the room
Mongo db勉強会
Mongo db勉強会
Pgunconf neo4j fdw
Pgunconf neo4j fdw
hiding
hiding
Nas
Nas
Cache勉強会
Cache勉強会
Ec2でのdisk拡張方法
Ec2でのdisk拡張方法
20150520 lt-neo4j勉強会-neofj fdw
20150520 lt-neo4j勉強会-neofj fdw
Bazaar
Bazaar
コード読経会
コード読経会
PHP+DB
PHP+DB
ドキュメント共有システム「ShareDoc」
ドキュメント共有システム「ShareDoc」
ファイルの隠し方
ファイルの隠し方
Similar to 3-1
extracting only a necessary file from a zip file
extracting only a necessary file from a zip file
Toshiyuki Shimono
多数のファイルを梱包したzip形式圧縮ファイルから、1つまたは必要なファイルだけを解凍して取り出すシェル芸。
210609 Biopackthon: BioImageDbs for ExperimentalHub (修正版)
210609 Biopackthon: BioImageDbs for ExperimentalHub (修正版)
Satoshi Kume
BioImageDbs (for ExperimentHub)の開発とそこから学んだパッケージ作成のTipsについて
コード読経会報告書
コード読経会報告書
Masahiko Toyoshi
10年効く分散ファイルシステム技術 GlusterFS & Red Hat Storage
10年効く分散ファイルシステム技術 GlusterFS & Red Hat Storage
Etsuji Nakai
2012/07/02 ver1.1 少しアップデートしました。
第3回 FIC&FCS合同勉強会
第3回 FIC&FCS合同勉強会
Hiroyuki Honta
2012 0623-x-road-tokyo-xoops-x(ten)
2012 0623-x-road-tokyo-xoops-x(ten)
Naoki Okino
20120913 nosql@hikarie(okuyama fuse)
20120913 nosql@hikarie(okuyama fuse)
Takahiro Iwase
2012/09/13にレバレジーズ様主催で開催されたNOSQLセミナーのLT資料です。 分散KVS okuyamaを利用したファイルシステム okuyamaFuseの紹介と性能評価です。
04 filesystem include
04 filesystem include
文樹 高橋
PHPのファイルシステム関数とインクルードについてです。
Docker Compose 徹底解説
Docker Compose 徹底解説
Masahito Zembutsu
オープンソースカンファレンス 2019 Tokyo/Spring 発表資料 #osc19tk https://www.ospn.jp/osc2019-spring/ 2019年2月22日(金)
Yapcasia2012 ltthon
Yapcasia2012 ltthon
turugina
NGS速習コース:UNIXの基礎の理解/Linux導入
NGS速習コース:UNIXの基礎の理解/Linux導入
Takeru Nakazato
バイオインフォマティクス人材育成カリキュラム(次世代シークエンサ) 速習コース 1-3 UNIXの基礎の理解/Linux導入 http://bit.ly/ngs2014 付録: コマンド集: http://data.dbcls.jp/~nakazato/presentation/nbdcngslec.linux.140925.pdf エディタのキーバインド集: http://data.dbcls.jp/~nakazato/presentation/nbdcngslec.editor.pdf
10分で分かるLinuxブロックレイヤ
10分で分かるLinuxブロックレイヤ
Takashi Hoshino
Similar to 3-1
(12)
extracting only a necessary file from a zip file
extracting only a necessary file from a zip file
210609 Biopackthon: BioImageDbs for ExperimentalHub (修正版)
210609 Biopackthon: BioImageDbs for ExperimentalHub (修正版)
コード読経会報告書
コード読経会報告書
10年効く分散ファイルシステム技術 GlusterFS & Red Hat Storage
10年効く分散ファイルシステム技術 GlusterFS & Red Hat Storage
第3回 FIC&FCS合同勉強会
第3回 FIC&FCS合同勉強会
2012 0623-x-road-tokyo-xoops-x(ten)
2012 0623-x-road-tokyo-xoops-x(ten)
20120913 nosql@hikarie(okuyama fuse)
20120913 nosql@hikarie(okuyama fuse)
04 filesystem include
04 filesystem include
Docker Compose 徹底解説
Docker Compose 徹底解説
Yapcasia2012 ltthon
Yapcasia2012 ltthon
NGS速習コース:UNIXの基礎の理解/Linux導入
NGS速習コース:UNIXの基礎の理解/Linux導入
10分で分かるLinuxブロックレイヤ
10分で分かるLinuxブロックレイヤ
Recently uploaded
Humanoid Virtual Athletics Challenge2024 技術講習会 スライド
Humanoid Virtual Athletics Challenge2024 技術講習会 スライド
tazaki1
HVAC2024第1回 技術講習会 スライド
Generating Automatic Feedback on UI Mockups with Large Language Models
Generating Automatic Feedback on UI Mockups with Large Language Models
harmonylab
Generating Automatic Feedback on UI Mockups with Large Language Modelsを和訳紹介したものです
LoRaWAN 4チャンネル電流センサー・コンバーター CS01-LB 日本語マニュアル
LoRaWAN 4チャンネル電流センサー・コンバーター CS01-LB 日本語マニュアル
CRI Japan, Inc.
LoRaWAN 4チャンネル電流センサー・コンバーター CS01-LB 日本語マニュアル
ReonHata_便利の副作用に気づかせるための発想支援手法の評価---行為の増減の提示による気づきへの影響---
ReonHata_便利の副作用に気づかせるための発想支援手法の評価---行為の増減の提示による気づきへの影響---
Matsushita Laboratory
我々はこれまで,新たなモノを産出する過程において「便利にすること」によって副次的に生じる課題を「便利の副作用」と定義し,その低減を目的としてアイディアの発想支援手法を提案してきた. これまでの研究では,便利前後の行為の増減に着目することにより便利の副作用への気づきの誘発が示唆されたものの,行為の増減の提示による便利の副作用への気づきへの影響は十分に検討できていなかった. そのため,本稿では行為の提示により便利の副作用に気づき,それを防いだアイディアの発想の支援が可能かの検証を目的として実験を行い,その有効性について検証する. 実験では,行為の増減の提示の有無によりアイディア発想にどのような影響を与えるか検証を行う.
論文紹介:Deep Learning-Based Human Pose Estimation: A Survey
論文紹介:Deep Learning-Based Human Pose Estimation: A Survey
Toru Tamaki
Ce Zheng, Wenhan Wu, Chen Chen, Taojiannan Yang, Sijie Zhu, Ju Shen, Nasser Kehtarnavaz, Mubarak Shah, "Deep Learning-Based Human Pose Estimation: A Survey" arXiv2020 https://arxiv.org/abs/2012.13392
遺伝的アルゴリズムと知識蒸留による大規模言語モデル(LLM)の学習とハイパーパラメータ最適化
遺伝的アルゴリズムと知識蒸留による大規模言語モデル(LLM)の学習とハイパーパラメータ最適化
t m
オープンエンドな進化から着想を得て、個々の大規模言語モデル(LLM)が、グループとして学習を進めながら、ノームエージェントとして機能するという概念を探求しています。これは、単一のモデルでは難しい複雑な問題を解決することを目的としています。具体的な方法として、遺伝的アルゴリズムと知識蒸留を組み合わせた学習プロセスを提案しています。知識蒸留によって学習を進め、同時に遺伝的アルゴリズムでハイパーパラメータを最適化することで、より効率的な学習を目指します。ドメインタスクとして、指示からPythonコードを生成するコード生成タスクを選択しました。実験では、学習に3つの学習モデルと1つの教師モデルを使用しました。その結果、HumanEvalのpass@1で精度が1.2%向上し、学習が進むにつれて学習率が最適化された兆候が見られました。しかし、大幅な精度向上を達成し、さまざまなハイパーパラメータを最適化するには、まだ課題が残っています。
「進化するアプリ イマ×ミライ ~生成AIアプリへ続く道と新時代のアプリとは~」Interop24Tokyo APPS JAPAN B1-01講演
「進化するアプリ イマ×ミライ ~生成AIアプリへ続く道と新時代のアプリとは~」Interop24Tokyo APPS JAPAN B1-01講演
嶋 是一 (Yoshikazu SHIMA)
進化するアプリ イマ×ミライ ~生成AIアプリへ続く道と新時代のアプリとは~ 2024/6/12~14まで幕張メッセで開催されました、インターロップ併設アプリジャパンの展示会場内ROOM Bで、10:30~11:10の枠で登壇させてもらいましたセッション資料を公開します。
This is the company presentation material of RIZAP Technologies, Inc.
This is the company presentation material of RIZAP Technologies, Inc.
chiefujita1
RIZAPテクノロジーズ株式会社の会社説明資料です。
生成AIがもたらすコンテンツ経済圏の新時代 The New Era of Content Economy Brought by Generative AI
生成AIがもたらすコンテンツ経済圏の新時代 The New Era of Content Economy Brought by Generative AI
Osaka University
、コンテンツ制作の主体をプロのクリエーターからユーザーへと移行させている現状をご存じの方も多いでしょう。現在、画像コンテンツ制作現場では生成AIがクリエーターを支援するツールとして利用されています。セミナーでは、画像生成における自動化の境界についての議論が予定されています。 AIの利用には著作権や倫理的な問題も伴いますが、クリエーターとAIが共存し、センシング技術と統合することで新しい形のコンテンツが生み出されることが期待されています。
キンドリル ネットワークアセスメントサービスご紹介 今のネットワーク環境は大丈夫? 調査〜対策までご支援します
キンドリル ネットワークアセスメントサービスご紹介 今のネットワーク環境は大丈夫? 調査〜対策までご支援します
Takayuki Nakayama
キンドリルネットワークアセスメントサービス
Recently uploaded
(10)
Humanoid Virtual Athletics Challenge2024 技術講習会 スライド
Humanoid Virtual Athletics Challenge2024 技術講習会 スライド
Generating Automatic Feedback on UI Mockups with Large Language Models
Generating Automatic Feedback on UI Mockups with Large Language Models
LoRaWAN 4チャンネル電流センサー・コンバーター CS01-LB 日本語マニュアル
LoRaWAN 4チャンネル電流センサー・コンバーター CS01-LB 日本語マニュアル
ReonHata_便利の副作用に気づかせるための発想支援手法の評価---行為の増減の提示による気づきへの影響---
ReonHata_便利の副作用に気づかせるための発想支援手法の評価---行為の増減の提示による気づきへの影響---
論文紹介:Deep Learning-Based Human Pose Estimation: A Survey
論文紹介:Deep Learning-Based Human Pose Estimation: A Survey
遺伝的アルゴリズムと知識蒸留による大規模言語モデル(LLM)の学習とハイパーパラメータ最適化
遺伝的アルゴリズムと知識蒸留による大規模言語モデル(LLM)の学習とハイパーパラメータ最適化
「進化するアプリ イマ×ミライ ~生成AIアプリへ続く道と新時代のアプリとは~」Interop24Tokyo APPS JAPAN B1-01講演
「進化するアプリ イマ×ミライ ~生成AIアプリへ続く道と新時代のアプリとは~」Interop24Tokyo APPS JAPAN B1-01講演
This is the company presentation material of RIZAP Technologies, Inc.
This is the company presentation material of RIZAP Technologies, Inc.
生成AIがもたらすコンテンツ経済圏の新時代 The New Era of Content Economy Brought by Generative AI
生成AIがもたらすコンテンツ経済圏の新時代 The New Era of Content Economy Brought by Generative AI
キンドリル ネットワークアセスメントサービスご紹介 今のネットワーク環境は大丈夫? 調査〜対策までご支援します
キンドリル ネットワークアセスメントサービスご紹介 今のネットワーク環境は大丈夫? 調査〜対策までご支援します
3-1
1.
データベースからのデータ取得 奈良医大 4回 原
篤志
2.
自己紹介 ・奈良医大4年 ・免疫学教室 ・ねずみの感染実験とかやっています
3.
今回使うコードやファイルは https://github.com/bonohu/DrBonoDojo/blob/master/3-1 にあります
4.
データ取得にコマンドラインを使うワケ ・圧縮データを解凍してほしくない 圧縮されたデータ(.gz, .zip, .bz2
etc)をSafariでダウンロードする と同時に解凍されてしまう... ・まとめて複数ファイルを保存できる 連番とか階層構造になってるデータなどを一気にダウンロー ドできる!
5.
よく使うコマンド cd :ディレクトリを移動 mkdir :ディレクトリを作る less
:ファイルの中身を見る(Spaceで進む、bで戻る、qで閉じる) ls :ディレクトリの内容を見る -a :隠しファイルも表示 -l :サイズやパーミッションを表示 rm :ファイル削除 -r :中身ごとディレクトリ削除 mv :ファイルの移動、名前変更 grep :ファイル中の文字列を検索
6.
ワイルドカード ワイルドカード 一致する文字列 ? 任意の一文字 *
任意の文字列 [文字列] 文字列に含まれる一文字 [!文字列] 文字列に含まれない一文字 h?ge → hoge, huge h*ge → heuge, hikage h[aiueo]ge → huge, hoge h[!aiueo]ge → hyge txtファイルだけ消したい! → rm *.txt 全部消したい! → rm * 例 文字列の特徴から複数の文字列を指定する
7.
正規表現 ワイルドカードより詳しく指定できる 正規表現 一致する文字列 . 任意の一文字 *
直前の文字の繰り返し [文字列] 文字列に含まれる、いずれかの一文字 [^文字列] 文字列に含まれない、いずれかの一文字 直後のメタ文字の意味を打ち消す 他にも色々 拡張正規表現もある
8.
標準出力とパイプライン > : 標準出力 2>
: エラー出力 >> : 上書きして出力 | : コマンドの結果を次のコマンドに渡す
9.
ファイルを取得する主なコマンド curl wget 再帰的に保存できない 対応しているプロトコルが多い 再帰的に保存できる 対応しているプロトコルはHTTP, HTTPS, FTPのみ
10.
データベースいろいろ アノテーションもいろいろ ● Entrez:NCBIが定義した遺伝子1つ1つにあてがわれるID ex) 2597,
16193 ● Genbank:NCBIが塩基配列を提供するDB (DDBJ, EMBLにもシェアされている) ex) X60188, NR_003589, LC170036 ● Refseq ex) NM_018009, NP_001035700 ● Ensembl ex) ENSG00000010404, ENST00000296026, ENSP00000296026 ● Uniprot ● GEO ex) GSE36570, GSM896985 ● ArrayExpress ex) E-MTAB-8284
11.
DDBJ KEGG PDJNCBIEBI
Uniprot TOGOWS ユーザー TOGOWSとは 色々なデータベースのデータを統合して、 簡単にアクセスできるようにするサービス
12.
TOGOWSを通してデータを取得 curl -O http://togows.org/entry/ddbj-ddbj/LC170036.fasta ヘッダー 配列 curl
-O http://togows.org/entry/ddbj-ddbj/LC170036 curl -O http://togows.org/entry/uniprot/HIF1_CAEEL.fasta
13.
繰り返し処理で複数のデータを取得 DBから連番のデータを一気にダウンロードしたい! 繰り返し使えば一発でできます! for i in
`seq 437098 437155` do echo “getting LC$i” curl http://togows.org/entry/ddbj-ddbj/LC$i.fasta >> seq.fasta sleep 1 done 437098, 437099・・・437155 curlの結果をseq.fastaに書き加えていく LC437098〜LC437155のfastaファイルが一気に取得できた!
14.
繰り返し処理で複数のデータを取得 ・ ・ ・ seq.fasta ・ ・ ・
15.
余談:クォートの違い シングルクォート hoge=’Hello World!’ echo ‘echo
$hoge’ ダブルクォート hoge=’Hello World!’ echo “echo $hoge” バッククォート hoge=’Hello World!’ echo `echo $hoge` Hello World! echo $hoge echo Hello World!
16.
余談:クォートの違い シングルクォート hoge=’Hello World!’ echo ‘echo
$hoge’ ダブルクォート hoge=’Hello World!’ echo “echo $hoge” バッククォート hoge=’Hello World!’ echo `echo $hoge` Hello World! echo $hoge echo Hello World! 中身をコマンドとして処理 `hogehoge`と$(hogehoge)は同義 中身の変数、正規表現を展開 単なる文字列として処理
17.
リストから一気にデータ取得 アクセッションナンバーのリストからデータを取得する IFS=$'n' for entry in
`cat entries.txt` do curl -O http://togows.org/entry/ddbj-ddbj/$entry.fasta done entries.txtから1行ずつ取り出してデータを取得 ダウンロードできてない... (NM...はRefseqのIDなので)
18.
リストから一気にデータ取得 異なるDBのIDは分けてから取得する grep “^NM” entries.txt
> entriesNM.txt for i in `cat entriesNM.txt` do curl -O http://togows.org/entry/ncbi-nucleotide/$entry.fasta done いろんなDBを合わせて取得することはできない! 別々に取り扱う!
19.
DBそのものを取得 UniprotKBにあるタンパク質配列を全てダウンロードする curl -O ftp://ftp.uniprot.org/pub/databases/uniprot/current_release/knowledgebase/complete/uniprot_sprot.fasta.gz Ensemble
human genomeの塩基配列をfasta形式で取得 (GRCh38) curl -O ftp://ftp.ensembl.org/pub/current_fasta/homo_sapiens/dna/Homo_sapiens.GRCh38.dna.toplevel.fa.gz
20.
lftpを用いた再帰的ダウンロード ファイルの一覧を取得 条件に合うファイル名を抽出し、取得するコマンドを生成 実行
21.
lftpを用いた再帰的ダウンロード lftp <<-END open ftp.ensembl.org/pub/current_fasta find END 再帰的にディレクトリ内のファイルを一覧表示 ENDと入力されたら終了 おわり get_ensembl_list.sh bash
get_ensembl_list.sh > ensembl_list.txt get_ensembl_list.shでensemblにあるfasta形式のファイル一覧を表示し、 ensembl_list.txtに書き込む ensemblにあるfasta形式ファイルの一覧を取得する
22.
fasta形式のタンパク質配列をまとめて取得 lftpを用いた再帰的ダウンロード grep pep.all.fa.gz ensembl_list.txt
| awk '{print "GET" $1 }' > ensembl_pep.txt ensembl_list.txtのうちタンパク質配列を検索 頭にlftpのファイル取得コマンド、GETをつける ensembl_pep.txt
23.
lftp <<-END open ftp.ensembl.org/pub/current_fasta ensembl_list-header.txt ensembl_pep.txt END ensembl_list-footer.txt lftpを用いた再帰的ダウンロード
24.
lftpを用いた再帰的ダウンロード fasta形式のタンパク質配列をまとめて取得できた!
Download now