Add ignore and fix bugs

distribusi/distribusi/fregments.py

@@ -18,19 +18,32 @@ class Fregment:
 
 class Fregments:
     def __init__(self):
+        self.json_data = {}
         self.index = {}
         self.indextable = []
         self.timetable = []
+        self.ignore = ['.ignore']
 
-        self.config_file = 'config.json'
-        self.index_file = 'fregments_index.json'
+        self.ignore_file = '.ignore'
+        self.index_file = 'index.json'
 
-        with open(self.index_file) as json_file:
-            self.json_data = json.load(json_file)
+        if os.path.isfile(self.index_file):
+            with open(self.index_file) as json_file:
+                self.json_data = json.load(json_file)
 
         self.temp_data = {"fregments":[]}
         self.count = len(self.json_data)
 
+    def add_ignore(self, directory):
+        ignore_path = os.path.join(directory, self.ignore_file)
+        if os.path.isfile(ignore_path):
+            ignore = open(ignore_path, 'r')
+            ignore_lines = ignore.readlines()
+            for line in ignore_lines:
+                stripped_line = line.rstrip()
+                self.ignore.append(stripped_line)
+            print(self.ignore)
+
     def creation_date(self, path_to_file):
         """
         Try to get the date that a file was created, falling back to when it was
@@ -55,7 +68,9 @@ class Fregments:
         if occupation > -1:
             origin_path = os.path.join(directory, file)
             date = self.creation_date(origin_path)
-            arr = directory.split("/")
+            arr = directory\
+                .split("/")
+            print(directory)
             if arr.__len__() == 2:
                 artist = arr[1]
             else:
@@ -80,6 +95,7 @@ class Fregments:
 
     def preindex(self, directory):
         for root, dirs, files in os.walk(directory):
+            self.add_ignore(root)
             arr = root.split("/")
             # 2뎁스까지만 인덱스 함.
             if arr.__len__() < 4:
@@ -87,12 +103,13 @@ class Fregments:
                 for f in files:
                     if self.is_meta(f):
                         pass
-                    elif f == "index.html" or f == ".DS_Store":
+                    elif f in self.ignore:
                         pass
                     elif self.has_meta(root, f):
                         self.occupancy(root, f)
                     else:
                         self.add_timetable(root, f)
+            if arr.__len__() > 2 and arr[2]:
                 # dirs index
                 for d in dirs:
                     if self.has_meta(root, d):

distribusi/test.py

@@ -7,15 +7,12 @@ from distribusi.distribusi import build_index
 parser = build_argparser()
 args = parser.parse_args()
 
-event_path = './events'
-data_path = './test_data'
+data_path = args.directory
 
 freg = fregments.Fregments()
-freg.preindex(event_path)
 freg.preindex(data_path)
 freg.postindex()
 
-distribusify(args, event_path, freg)
 distribusify(args, data_path, freg)
 
 build_index(args, data_path, freg)

index.json

@@ -2,18 +2,18 @@
     {
         "__Fregment__": {
             "index": 0,
-            "update": 1605171358.9636276,
-            "directory": "./events",
-            "artist": "events",
+            "update": 1605581893.2526722,
+            "directory": "./test_data/event_lecture",
+            "artist": "event_lecture",
             "file": "event_0000"
         }
     },
     {
         "__Fregment__": {
             "index": 1,
-            "update": 1605171365.1618817,
-            "directory": "./events",
-            "artist": "events",
+            "update": 1605584344.6146529,
+            "directory": "./test_data/event_lecture",
+            "artist": "event_lecture",
             "file": "event_0001"
         }
     },
@@ -74,9 +74,9 @@
     {
         "__Fregment__": {
             "index": 8,
-            "update": 1605171377.7292128,
-            "directory": "./events",
-            "artist": "events",
+            "update": 1605581893.2483907,
+            "directory": "./test_data/event_workshop",
+            "artist": "event_workshop",
             "file": "event_0008"
         }
     },
@@ -187,32 +187,5 @@
             "artist": "fig",
             "file": "fig002.txt"
         }
-    },
-    {
-        "__Fregment__": {
-            "index": 21,
-            "update": 1605170712.9904313,
-            "directory": "./events/event_0000",
-            "artist": "event_0000",
-            "file": "124469821_121248626457919_479957910997498417_n.jpg"
-        }
-    },
-    {
-        "__Fregment__": {
-            "index": 22,
-            "update": 1605170736.042438,
-            "directory": "./events/event_0000",
-            "artist": "event_0000",
-            "file": "124157237_121248643124584_872058020963845448_n.jpg"
-        }
-    },
-    {
-        "__Fregment__": {
-            "index": 23,
-            "update": 1605170741.7326746,
-            "directory": "./events/event_0000",
-            "artist": "event_0000",
-            "file": "124476076_121248659791249_2342598949363915450_n.jpg"
-        }
     }
 ]

test_data/.ignore

@@ -0,0 +1,3 @@
+.DS_Store
+index.html
+404.html

test_data/event_lecture/event_0001/event_0001.txt

@@ -0,0 +1,26 @@
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+이벤트 0001 에 대한 설명문
+
+