宜しくお願い申し上げます。
ACCESS超初心者です。
環境はwindows7、ACCESS2013
Webログの解析を行う事になり、本等を参考にしているのですが、さっぱり理解できない状態で四苦八苦しております。
やりたい事
毎月webログをダウンロードします。(これは監視ソフトからtxtファイルで落とします)
1ヵ月の件数が500万件を超える場合もあります。
分類(URL指定、タイトル指定)でカテゴリ毎(ここはすみません書けないのですが)に分けて抽出します。
分類はとても多く200件以上あります。(増加する可能性は大です)
ダウンロードしたWebログと分類を突き合わせて合致する物をカテゴリ毎にテーブル作成。
分類が多く全て入力すると「複雑すぎます」とエラーが出てしまいます。
分類を少なくして段階的に分けていくという事もありえるのかな?と思うのですが、容量が大きくなりすぎて動きません。
漠然とし過ぎて判り難いかもしれませんが、是非ご教授をお願い申し上げます。
No.2ベストアンサー
- 回答日時:
textで落としたのでしたら、そのままテキストエディタで扱えば早いのでは?
⇒EmEditor (テキストエディタ) - Unicode、巨大ファイルにも対応する Windows用定番テキストエディター!( http://jp.emeditor.com/?PHPSESSID=39def6309933e7 … )
サーバーが出力するテキストエディタですから、決まりきったフォーマットですから、正規表現を活用して拾い出せば、10分もあれば完了する作業のように思えます。スクリプトを書いて登録しておけば、あっという間に終わりそう。
もちろん、サーバーにあるSED(ストリームエディタ)を使って、サーバーで処理してしまえばもっと良いでしょう。SEDはWindows版もあります。ストリームエディタの名前どおり一行ずつ処理していきますから極めて高速です。
また、テキストの扱いに長けているPerlなどで処理してもよいでしょう。
そのようなログファイルをサーバーで処理せずに落としてくるなんてとても無駄な作業のように見受けられます。豊富なコマンドが使えるサーバーで処理しましょう。
たとえローカルで行うにしても、いきなりofficeじゃ無茶です。
有難うございます。
アドバイス感謝致します。
プログラム開発から離れて15年以上経っての課題で難儀しておりますが、いきなりOfficeでは無茶とのご指摘で再考してみます。
No.1
- 回答日時:
ご質問のタイトルがその・・よくありません。
タイトルだけでは内容をうかがい知ることができないので
取りあえず見てみる、Access2013 は持ってない、さよなら。
閲覧数だけは無駄に増えます。
私も2013は持ち合わせておりませんが、
ひと月に500万レコード増えてゆくという解釈で考えると
Accessはファイルサイズが最大でも2GBとという制限がありますので
すぐに限界に達してしまいそうです。現状ではサイズはどれくらい?
また、現状でどのような処理を行われているのか具体的な内容が不明なので
少しはマシかも?という回答もできません。
(わかったとしても多分、無理っぽいような気がします)
具体的な例を内容を全く変えて提示されると誰かから回答を得られるかもしれません。
カテゴリテーブルを作成してそれのレコードセットを開く。
各レコードごとに
>ダウンロードしたWebログと分類を突き合わせて合致する物をカテゴリ毎にテーブル作成
カテゴリテーブルの最終レコードまでループ処理。
とかになりそうですが、
いかんせんレコード数が多すぎて何時になったら終わることやら・・になりそうです。
Oracle、SQLServer 、MySQL などを検討されるべきかと。
私からは以上です。
お探しのQ&Aが見つからない時は、教えて!gooで質問しましょう!
関連するカテゴリからQ&Aを探す
おすすめ情報
- ・漫画をレンタルでお得に読める!
- ・14歳の自分に衝撃の事実を告げてください
- ・架空の映画のネタバレレビュー
- ・「お昼の放送」の思い出
- ・昨日見た夢を教えて下さい
- ・ちょっと先の未来クイズ第4問
- ・【大喜利】【投稿~10/21(月)】買ったばかりの自転車を分解してひと言
- ・メモのコツを教えてください!
- ・CDの保有枚数を教えてください
- ・ホテルを選ぶとき、これだけは譲れない条件TOP3は?
- ・家・車以外で、人生で一番奮発した買い物
- ・人生最悪の忘れ物
- ・【コナン30周年】嘘でしょ!?と思った○○周年を教えて【ハルヒ20周年】
- ・ハマっている「お菓子」を教えて!
- ・最近、いつ泣きましたか?
- ・夏が終わったと感じる瞬間って、どんな時?
- ・10秒目をつむったら…
- ・人生のプチ美学を教えてください!!
- ・あなたの習慣について教えてください!!
- ・牛、豚、鶏、どれか一つ食べられなくなるとしたら?
- ・都道府県穴埋めゲーム
デイリーランキングこのカテゴリの人気デイリーQ&Aランキング
-
英数字のみ全角から半角に変換
-
会社PCのメールが更新されない
-
Microsoft Formsの「個人情報や...
-
outlookに追加したアカウントの...
-
outlookのメールが固まってしま...
-
【Excel VBA】PDFを作成して,...
-
Microsoft365で写真をアルバム...
-
エクセルやパワポファイルの保...
-
エクセルでXLOOKUP関数...
-
エクセルにて横に月の行があり...
-
teams設定教えて下さい。 ①ビデ...
-
エクセルで英文字に入れた下線...
-
Outlookを立ち上げたらGoogleロ...
-
マイクロソフト 一時使用コード...
-
漫画喫茶のローカルフォルダに...
-
Office2021を別のPCにインスト...
-
Microsoft Officeを2台目のPCに...
-
IF(EXACT(B1,B2),"一致","不一...
-
Outlook で宛先が複数の場合の人数
-
マクロ1があります。 A1のセル...
マンスリーランキングこのカテゴリの人気マンスリーQ&Aランキング
-
英数字のみ全角から半角に変換
-
会社PCのメールが更新されない
-
この様式の雛形を作るとしたら...
-
【Excel VBA】PDFを作成して,...
-
マクロ自動コピペ 貼り付ける場...
-
Microsoft Officeを2台目のPCに...
-
outlookのメールが固まってしま...
-
エクセルでのパーセントの計算
-
エクセルでXLOOKUP関数...
-
Microsoft Formsの「個人情報や...
-
Outlook で宛先が複数の場合の人数
-
大学のレポート A4で1枚レポー...
-
Excel テーブル内の空白行の削除
-
【マクロ】違うブックのCallス...
-
teams設定教えて下さい。 ①ビデ...
-
Officeを開くたびの「再起動メ...
-
エクセルで英文字に入れた下線...
-
Microsoft365で写真をアルバム...
-
Teams内でショートカットって貼...
-
office365って抵抗感ないですか?
おすすめ情報