お知らせ 2024年9月1日よりconnpassサービスサイトへのスクレイピングを禁止とし、利用規約に禁止事項として明記します。
9月1日以降のconnpassの情報取得につきましては イベントサーチAPI の利用をご検討ください。

お知らせ connpassではさらなる価値のあるデータを提供するため、イベントサーチAPIの提供方法の見直しを決定しました。2024年5月23日(木)より 「企業・法人」「コミュニティ及び個人」向けの2プランを提供開始いたします。ご利用にあたっては利用申請及び審査がございます。詳細はヘルプページをご確認ください。

このエントリーをはてなブックマークに追加

Mar

3

Rubyを使ったスクレイピングワークショップ0303

Rubyを使ったスクレイピングワークショップ0303
Registration info

無料参加

Free

FCFS
11/8

Attendees
Ichinoji
frmaki
mtake17
unagi_pie
uiro
Kenji-K
tak938
ig
Taku_1991
kanikani2929
View Attendee List
Start Date
2018/03/03(Sat) 14:00 ~ 18:00
Registration Period

2018/02/09(Fri) 14:47 〜
2018/03/03(Sat) 18:00まで

Location

代々木村田マンション711

東京都渋谷区代々木4丁目28−8

View Map

Description

対象

プログラミング初心者も可です。 スクレイピングしたいサイトがあれば、その場でレクチャーをします。 2/3の「Rubyを使ったスクレイピングワークショップ」のプログラムと同様です。

必要となるもの

RubyがインストールされたノートPC (WindowsでもMacでもLinuxでも可) バージョンは特には問いませんが、2.3以降が無難かと思います。

内容

  • 開発環境構築
  • open-uriを使ったHTTP取得
  • Nokogiriを使ったパース
  • ChromeDeveloperツールの使い方
  • HTTPヘッダに関して
  • AJAX通信内容をみてJSONをパース
  • ログインクッキーを使ったスクレイピング
  • curlコマンド単体での実験方法
  • curlコマンドをrubyソースに変換する方法
  • ページングをたどった全件取得
  • (上級編)puppeteer を使ったheadless chromeの操作
  • (上級編)Charles を使った、スマホネイティブアプリのスクレイピング

一つのクローラーを完成させるところまでやりきります。

場所

代々木村田マンション 711

〒151-0053 東京都渋谷区代々木4丁目28−8

Media View all Media

If you add event media, up to 3 items will be shown here.

Feed

yugo_yamamoto

yugo_yamamoto published Rubyを使ったスクレイピングワークショップ0303.

02/09/2018 14:47

Rubyを使ったスクレイピングワークショップ0303 を公開しました!

Group

アグリゲーター

Number of events 6

Members 76

Ended

2018/03/03(Sat)

14:00
18:00

You cannot RSVP if you are already participating in another event at the same date.

Registration Period
2018/02/09(Fri) 14:47 〜
2018/03/03(Sat) 18:00

Location

代々木村田マンション711

東京都渋谷区代々木4丁目28−8

Organizer

Attendees(8)

Ichinoji

Ichinoji

Rubyを使ったスクレイピングワークショップ0303に参加を申し込みました!

frmaki

frmaki

I joined Rubyを使ったスクレイピングワークショップ0303!

mtake17

mtake17

Rubyを使ったスクレイピングワークショップ0303 に参加を申し込みました!

unagi_pie

unagi_pie

Rubyを使ったスクレイピングワークショップ0303に参加を申し込みました!

uiro

uiro

Rubyを使ったスクレイピングワークショップ0303に参加を申し込みました!

Kenji-K

Kenji-K

Rubyを使ったスクレイピングワークショップ0303 に参加を申し込みました!

tak938

tak938

Rubyを使ったスクレイピングワークショップ0303に参加を申し込みました!

ig

ig

Rubyを使ったスクレイピングワークショップ0303 に参加を申し込みました!

Attendees (8)

Waitlist (3)

Taku_1991

Taku_1991

Rubyを使ったスクレイピングワークショップ0303に参加を申し込みました!

kanikani2929

kanikani2929

Rubyを使ったスクレイピングワークショップ0303 に参加を申し込みました!

pong_hiro

pong_hiro

Rubyを使ったスクレイピングワークショップ0303 に参加を申し込みました!

Waitlist (3)

Canceled (13)